Od 1 lipca 1961 ks. Józef został proboszczem parafii Tulce i kustoszem tamtejszego Sanktuarium Maryjnego. Tutaj również wyremontował plebanię i kościół, przygotował obszerny dziedziniec, nowy ołtarz polowy, opłotował kościół i cmentarz grzebalny. W 1973 r. rozpoczął budowę kaplic w Robakowie, wsi należącej do tuleckiej parafii.
Wielką troską i serdecznością otaczał pielgrzymów zdążających zarówno do Tulec, jak i wyruszających z Poznańską Pieszą Pielgrzymką na Jasną Górę.
2 września 1979 r., dzięki staraniom ks. Woźniaka, cudowna figura Matki Bożej z Dzieciątkiem ukoronowana została przez abp Jerzego Strobę papieskimi koronami.
W dniach od 18 maja do 3 czerwca 1970 r. ks. Woźniak, jako były więzień KL Dachau wziął udział w pielgrzymce do obozu koncentracyjnego wraz z 220 księżmi obozowiczami 25-lecia ich uwolnienia.