thumb|Budynek starostwa powiatowego istniejący do 1945 r. (w oddali). Zamku w pierwotnej postaci już nigdy nie odbudowano. Przyjmuje się, iż ruiny i fundamenty zamku przetrwały kilka wieków jako własność książąt pruskich. W późniejszym czasie, prawdopodobnie z ich wykorzystaniem wybudowano tu siedzibę starostów książęcych. Natomiast w 1902 na fali ogólnego i gwałtownego rozwoju miasta przeniesiono do Bartoszyc siedzibę powiatu frydlandzko-bartoszyckiego, a w okazałym, wzniesionym na fundamentach zamku budynku umiejscowiono siedzibę starostwa powiatowego. Budynek ten doszczętnie spłonął w 1945 pod koniec działań wojennych.
Budynku nigdy nie odbudowano i nie pojawiały się takie plany.
Na terenie Wzgórza Zamkowego znajduje się zalesiony park, a u jego podnóża rekreacyjny Park Elizabeth. Fundamenty zamku są całkowicie zasłonięte, jednak możliwości techniczne pozwalają na ich odsłonięcie. „Lokalny Program Rewitalizacji Miasta Bartoszyce na lata 2007-2013” zakładał Odtworzenie zabytków średniowiecznej architektury.