Następnie zamek był w posiadaniu synów Hermanna: Moritza (1849–1876) i Wilhelma (1876–1907). Zamek odziedziczyła trzecia córka Wilhelma, Wiktoria von Wylich und Lottum (zmarła w 1933 roku), a jej mąż Ludolf von Wylich und Lottum, ostatni właściciel zamku, zmarł nie pozostawiając następców w dniu 20 marca 1944 roku w Neklade na Rugii. Podczas działań wojennych II wojny światowej nie został zniszczony.
Okres PRL Po II wojnie światowej zamek stał opuszczony w latach 1945–1953, spalony w 1953 roku, zabezpieczony w 1958 roku, podczas odbudowy oraz prac adaptacyjnych na potrzeby domu kultury z lat 1959–1963 zniszczono pozostałe po pożarze wyposażenie i wystrój wnętrz. W 1962 roku zamek został wpisany do rejestru zabytków. Po 1974 roku remont i adaptacja piwnic i kazamatów.
Okres współczesny W 1995 roku przeprowadzono remont elewacji. Obecnie w zamku mieści się Centrum Kultury „Zamek”, będące instytucją kultury miasta Wrocławia.