Po tym jak ks. Michał Ogiński wybrał karierę polityczną i muzyczną, a także po tym gdy namiestnik pruski Karl von Hoym zgodził się na „zamianę” majątków właścicieli, dobra guzowskie przeszły na własność najstarszego syna i synowej Pauli z Szembeków – Feliksa Łubieńskiego h. Pomian i jego żony Tekli z Bielińskich h. Junosza, pod koniec XVIII wieku.Za wstawiennictwem króla Prus, udało się Łubieńskiemu zamienić z von Hoymem dobra Kalinowa i Szczytniki za cały Guzów.Żuchlewska Teresa, Feliks Łubieński. Działalność polityczna i jej związek z nauką i Kulturą. Rocznik Żyrardowski 6, 417-439. 2008. Muzeum Historii Polski; https://web.archive.org/web/20170202200038/http://mazowsze.hist.pl/29/Rocznik_Zyrardowski/658/2008/23611/ Zespół dworski już wtedy był bardzo rozbudowany, obejmował między innymi oranżerię, ogród włoski i dworski teatrzyk; we wnętrzach dworu Feliks i Tekla Łubieńscy przyjmowali na śniadaniu pruską parę monarszą – Fryderyka Wilhelma III wraz z małżonką. Wizyta miała być tak udana, że Fryderyk Wilhelm III obdarzył Feliksa i Teklę dziedzicznymi tytułami hrabiowskimi.