Prawdopodobnie między rokiem 1576 a 1595 majątek Wilczyska z istniejącą tu nieznaną bliżej siedzibą Ciołków znalazł się w ręku wojewody rawskiego Anzelma Gostomskiego lub jego syna Stanisława Gostomskiego. Przypuszczalnie to któryś z nich rozpoczął budowę nowożytnego zamku, którego pozostałości są widoczne do dzisiaj. Po śmierci w 1598 roku Stanisława Gostomskiego, który zmarł bezdzietnie, Wilczyska odziedziczył jego brat Hieronim Gostomski, wojewoda poznański i starosta sandomierski. Hieronim Gostomski dzierżył wiele starostw i dzięki znacznemu majątkowi zasłynął licznymi fundacjami, w tym Collegium Gostomianum dla jezuitów w Sandomierzu. Przypuszczalnie to Hieronim Gostomski rozbudował zamek do jego najświetniejszej fazy. Hieronim Gostomski zmarł w roku 1609, a Wilczyska odziedziczył jego syn, Jan Gostomski z Leżenic, wojewoda inowrocławski, a następnie kaliski.
Na zamku wojewoda Jan Gostomski w okresie od 9 do 11 kwietnia 1617 r.