Po wojnie W czasie oblężenia Festung Breslau pałac został bardzo poważnie zniszczony. Na Nowym Targu znajdowała się bateria artylerii. Obawiano się, że pociski mogą zawadzać o budynek, wysadzono więc jego wyższe kondygnacje, aby ułatwić ostrzał. Główna fasada była odspojona i ostatecznie runęła w 1946. Wojnę przetrwał jednak nie tylko portyk balkonowy, hall i boczna ściana od ul. Krowiej, ale cały parter, którego znaczną część rozebrano ze względu na zapotrzebowanie na cegłę do odbudowy Warszawy. Ocalała jedynie sklepiona sień z zabytkowymi kolumnami pochodzącymi z wcześniejszej siedziby Piastów.
Ruiny pałacu Hatzfeldtów przez kilkanaście lat po wojnie pełniły rolę planu zdjęciowego. Wrocławska Wytwórnia Filmów Fabularnych organizowała tu ujęcia niektórych filmów wojennych, w których miejsce to służyło jako filmowe miejsce akcji.
Początkowo planowano pełną odbudowę pałacu, powstały nawet bardzo konkretne projekty, później jednak zaniechano odbudowy, m.in. z tego powodu, że był on m.in. siedzibą gauleitera Karla Hankego.