W połowie XV w. Sieraków otrzymał Łukasz Górka herbu Łodzia, który przeprowadził przebudowę skrzydła południowego. W 1571 roku zamek przeszedł w ręce starosty Jakuba Rokossowskiego. W 1591 roku Sieraków kupił kasztelan Jan z Bnina Opaliński, który znacznie go przebudował. Przebudowa za czasów Opalińskich polegała na nadbudowie dwóch pięter na istniejących gotyckich murach oraz zmniejszenie powierzchni dziedzińca. Bryła zamku otrzymała renesansowe szczyty. Wszystkie wnętrza parteru zostały sklepione. Wokół niewielkiego podwórza na poziomie pietra znajdował się drewniany ganek.
W 1763 zamek i włości kupuje baron Piotr Mikołaj Neugarten von Gartenberg używający polskiego nazwiska Sadogórski i prawdopodobnie za jego czasów dokonano rozbiórki zniszczonego skrzydła północnego pozostawiając jedynie skrzydło południowe.
W 1829 w związku z budową nowej drogi pozostałości zamku zostały rozebrane. Ocalałe jedynie przyziemie skrzydła południowego zmieniono na lodownię.