Po zakończeniu wojny na podstawie II pokoju toruńskiego z 1466 roku włączono go do Królestwa Polskiego przeznaczając go na siedzibę starosty, którym został Ulryk Czerwonka. W 1511 roku na polecenie Zygmunta Starego zamek został wyremontowany.
W latach 1616–1623 przebudowany na polecenie siostry króla Zygmunta III Wazy królewny Anny Wazówny, która objęła starostwo golubskie – dodano wtedy m.in. późnorenesansowe attyki, budynek na przedbramiu, zmieniono kształt okien i dodano wieżyczki w narożach. Tutaj po raz pierwszy wyhodowano w Polsce tytoń, który sprowadzono z TurcjiMieczysław Haftka „Zamki Krzyżackie w Polsce – Szkice z Dziejów”, Muzeum Zamkowe w Malborku, 1999, s. 119, .. W 1623 roku w Golubiu przebywał król Zygmunt III Waza. Zniszczony w 1655 roku w czasie wojen szwedzkich. Na początku XVIII wieku wyremontowano wnętrza. W czasie wojen napoleońskich w zamku mieścił się lazaret. Uszkodzony w 1842 roku oraz w 1867, gdy huraganowy wiatr zawalił częściowo attyki. W 1920 roku władze polskie urządziły w zamku muzeum. W 1937 roku wyremontowano dach i kilka pomieszczeń.