Okres habsburski W 1563 roku na zamku przebywał Maksymilian II Habsburg. W roku 1610 Heinrich von Hörnig wybudował nową urządzoną z przepychem ufortyfikowaną siedzibę rodową w miejscu poprzedniego zamku. W 1611 roku odwiedził ją król czeski Maciej Habsburg (od 1612 roku cesarz rzymski). Zamek został zniszczony w 1633 roku przez działania zbrojne wojny trzydziestoletniej. W rękach rodu von Hörnig zamek pozostawał do roku 1641. W 1651 roku został kupiony przez Horatiusa von Forno (z którym związane jest legenda o duchu nawiedzającym zamek) i pozostawał własnością tego rodu (z krótka przerwą na początku XVIII wieku) do roku 1733, kiedy kupiony został przez Zakon Krzyżowców z Czerwoną Gwiazdą i w latach 1735–1740 pod kierownictwem architekta Christopha Hacknera przebudowany w stylu barokowym (scalono istniejące dwa skrzydła w jedną bryłę i ujednolicono elewację zachowując poprzedni charakter wnętrz). Na trakcie prowadzącym do Środy Śląskiej (obecnie plac Świętojański) ustawiono pomnik Matki Boskiej i św. Jana Nepomucena. Po I wojnie śląskiej Leśnica wraz z większą częścią Śląska oraz z ziemią kłodzką stała się częścią Królestwa Prus, a potem Cesarstwa Niemieckiego.