Po raz ostatni kościółek był rozbudowany w 1936 roku, wtedy to starą zakrystię znajdującą się we wschodniej części świątyni przebudowano na prezbiterium. Ustawiono w nim nowy neobarokowy ołtarz z piaskowcową Pietą, zakupiony w 1907 roku przez ks. Walentego Wojciecha. Mimo tego, że w marcu 1945 roku w pobliżu kościółka toczyły się zacięte walki, nie doznał on większych szkód.

Dopiero po wojnie rozpoczął się okres zaniedbania świątyni, wtedy też skradziono część wyposażenia kościółka i kaplic, lecz największą stratą było zniknięcie cudownego obrazu Matki Bożej, o którym jest mowa w legendzie. Renesans tego miejsca nastąpił dopiero w latach 70. XX wieku, gdy sanktuarium przejęte zostało przez parafię pod wezwaniem Nawiedzenia Najświętszej Marii Panny w Ścinawie Małej. W 1989 roku, w związku z powołaniem do istnienia parafii pw. św. Floriana w Przydrożu Małym, Szwedzka Górka po raz kolejny zmieniła swoją przynależność, stając się częścią nowo powstałej parafii. Dziś Szwedzka Górka nadal pozostaje miejscem częstych pielgrzymek dla mieszkańców miejscowości byłego powiatu