Przed drugą wojną światową znajdował się tu urząd finansowy i mieszkania urzędników. Na początku lat 40. przebudowano zachodnią część piwnic znajdujących się pod skrzydłem północnym, z przeznaczeniem na schron przeciwlotniczy. Pod koniec stycznia 1945 wojska radzieckie zajęły miasto i spaliły większą część staromiejskiej zabudowy miasta oraz zamku.
Zamek odbudowano w latach 1964–1966 staraniem Wojewódzkiego Konserwatora Zabytków w Olsztynie ze środków Ministerstwa Kultury i Sztuki. Przywrócono mu gotycki charakter dzięki podwyższeniu dachów, skrzydeł południowego i wschodniego oraz dodaniu jednego piętra z gotyckimi szczytami i spadzistym dachem w skrzydle północnym. Nie nawiązywano już jednak do przedwojennego kształtu, ale przeprowadzono jego regotyzację, nawiązującą do jego wyglądu z czasów panowania Albrechta Hohenzollerna. Skorzystano z rysunków i dokumentacji stworzonej przez Conrada Steinbrechta. Odbudowano w pierwotnej wysokości skrzydło północne i odtworzono gotyckie ozdobne szczyty. Obecnie wewnątrz zamku mieści się Biblioteka Miejska oraz Muzeum Regionalne im.