Pomiędzy 1783 a 1795 r. zgromadzenie dominikanów wzniosło „officynę murowaną dwupiętrową w ktorey umieszczały się szkoły”, ciągnący się wzdłuż zaułku Trojeckiego, idącego ku Niemieckiemu Rynku. Po upadku Powstania listopadowego w 1832 roku zakonnicy zostali poddani represjom przez zaborców rosyjskich, polegających na zsyłkach na Syberię i karach więzienia, a sam klasztor został zlikwidowany. Następnie budynek klasztorny został do 1839 roku całkowicie przebudowany na budynek Gimnazjum wznoszącego się wzdłuż obecnej ulicy Sowieckiej (dawniej Wileńskiej, potem Dominikańskiej). Budynek otrzymał klasycystyczną fasadę. Po rozbiórce kościoła dokonano kolejnych zmian, poszerzając w 1880 roku skrzydło północne o południową nawę kościoła. Po 1945 roku w budynku gimnazjum mieścił się kombinat mięsny, a w latach 60. XX wieku przebudowano go na mieszkania.