Data widniejąca na wieży Perły – 1872, będąca datą dobudowania wieży, wprowadziła ówczesne władze w błąd odnośnie wieku samego obiektu, przez co Perła aż do 2005 roku znajdowała się poza rejestrem.
Od czasu opuszczenia Żeliszowa przez dawnych mieszkańców, Perła była własnością państwową, zarządzaną przez Gminę Wiejską Bolesławiec. Przez dekady stopniowej degradacji obiektu, było kilka pomysłów zagospodarowania jej przestrzeni. W jednej wersji miała stać się salą gimnastyczną dla pobliskiej szkoły podstawowej. W innej główny obiekt miał zostać zburzony, a wieża miała pełnić funkcję punktu widokowego i nadajnika GSM. W celu zabezpieczenia obiektu przed wejściem ciekawskich, Gmina zdecydowała o zamurowaniu wszelkich otworów drzwiowych i okiennych.
W 2010 roku w Perle powstał krótkometrażowy film Patryka Kizny „The Chapel”, dzięki któremu Perła stała się rozpoznawalna na całym świecie, co później przełożyło się na rosnące zainteresowanie w kraju i szansę dla jej odbudowy. Ta szansa nie została jednak wykorzystana, żadne prace na rzecz obiektu nie zostały podjęte, nie było też pomysłu na jego nową funkcję. Pod koniec 2012 roku warszawska Fundacja Twoje Dziedzictwo podpisała z Gminą Wiejską Bolesławiec list intencyjny o współpracy na rzecz Perły, rozpoczynając projekt pn.