W sierpniu 1939 roku Alfons Haberfeld z żoną Felicją uczestniczyli w Wystawie Światowej w Nowym Jorku, prezentując swoje produkty w ramach polskiego pawilonu. W drodze powrotnej, w chwili wybuchu II wojny światowej, statek został zatrzymany i skierowany do Szkocji, uniemożliwiając im powrót do okupowanej przez Niemców Polski. Podczas Zagłady zginęła m.in. ich córka Franciszka Henryka. Alfons i Felicja wrócili do USA. W roku 1952 wraz z innymi ocalonymi z Zagłady założyli w Los Angeles organizację pod nazwą Club 1939. Oboje zmarli w Los Angeles, Alfons w roku 1970, a Felicja 2010.
W okresie okupacji niemieckiej fabryka została przejęta przez okupanta, a zarządcą komisarycznym (tzw. treuhänder) został Niemiec o nazwisku Handelmann. Niemcy posługiwali się wtedy nalepkami następującej treści: „Haberfeld unter Verwaltung Treuhändler”, a produkcja w tym okresie była kontynuowana na mniejszą skalę. Całe mienie fabryczne, jak i dom rodziny zostało nietknięte i przetrwało okres okupacji hitlerowskiej.