Kościoły, gdzie gromadzili się Polacy, znajdowały się także w Zozowie, Pryłuce i Wachówce. W samym Lipowcu do początku XIX w. funkcjonowała jedynie kaplica – przez brak funduszy na odbudowę spalonego drewnianego kościoła. Nowy kościół zaczął budować w 1803 r. hrabia Strytuński. Budowę zakończyła prawie 20 lat później, w 1822 r., wdowa po nim, z domu Zamojska. Pierwszym proboszczem nowej świątyni został syn króla szwedzkiego Karola Gustawa – baron Truchsess. W połowie XIX wieku parafia lipowiecka naliczała około 440 katolików, którzy mieszkali przeważnie na osiedlach „Zamczysko” i „Polska”.
Drugi kościół też był drewniany i po 30 latach od konsekrowania potrzebował remontu. Biskup diecezji łucko-żytomierskiej podjął decyzję o wybudowaniu nowego, murowanego kościoła w Lipowcu. Budowa trwała długie lata.
Podczas II wojny światowej świątynia została zniszczona, prawdopodobnie przez uciekające oddziały czerwonoarmistów i tylko fundament tego kościoła, znajdujący się obok szkoły nr 2 w Lipowcu, przypominał o historii miasteczka.