Do 1925 r. do Bydgoszczy przybyło łącznie 7 misjonarzy z Niemiec, Stanów Zjednoczonych i z misji afrykańskich. W tym roku ustanowiono w Polsce wiceprowincję zakonną, której przełożonym został o. Zygmunt Rydlewski. Pod koniec 1925 r. seminarium przeniesiono do nowej willi na ulicy Kujawskiej 117. W jednej z sal urządzono kaplicę zakonną, poświęconą w 1932 r., do której licznie uczęszczali okoliczni mieszkańcy. Pierwotny ołtarz w stylu amerykańskim został wykonany przez o. Stanisława Zaborowskiego. W tym samym budynku znajdowało się Niższe Seminarium Duchowne zwane Internatem Ducha Świętego, które słynęło z wysokiego poziomu nauczania. Uczyło się w nim ok. 70 młodych nowicjuszy. W latach 1928–1932 znajdował się ponadto nowicjat dla braci, przeniesiony później do Puszczykowa. W latach 1930–1939 Zgromadzenie wydawało kwartalnik „Posłaniec Ducha Świętego”, poświęcony Duchowi Świętemu i misjom afrykańskim.
W czasie II wojny światowej prowincja poniosła wielkie straty, zarówno personalne jak i materialne. Ośmiu członków zgromadzenia zginęło w obozach lub zmarło wkrótce po ich opuszczeniu. Kaplica została zdewastowana i pozbawiona ołtarza.