W czasie II wojny światowej osada była silnym ośrodkiem Armii Krajowej i Narodowych Sił Zbrojnych. thumb|Kamienice w centrum miasta
Podczas okupacji hitlerowskiej w styczniu 1942 roku Niemcy utworzyli getto dla żydowskich mieszkańców. Przebywało w nim około 2500 Żydów. W październiku 1942 zostali wywiezieni do getta w Opocznie, a stamtąd do obozu zagłady Treblinka II i tam zamordowani.
Po okresie zastoju inwestycyjnego, który nastąpił w latach 80., lata 90. przyniosły znaczny postęp. Centrum Żarnowa uległo znacznym zmianom. Grodzisko wygląda bardzo podobnie jak w poprzednich latach.
W 1998 roku do Żarnowa przyłączono sąsiednie wsie: Trestę Wesołą i Dorobną Wieś (nazwa oboczna: Drobna Wieś)..
Zabytki Według rejestru zabytków NID na listę zabytków wpisane są obiekty:
Kościół parafialny pw. św. Mikołaja
W pierwszej połowie XII wieku wzniesiono kościół z kamienia ciosowego, który pomimo kolejnych przebudów zachował swoje pierwotne romańskie cechy architektoniczne w części zachodniej. Cechy romańskie ma także wieża łącząca się z frontem kościoła.
Nawet opracowania bardziej ogólne, dotyczące sztuki romańskiej w Polsce wskazują na Żarnów.