Szawleski stosunkowo szybko skonfliktował się z innymi pracownikami Konsulatu Generalnego. W 1922 tamtejsi kierownicy wydziałów, wsparci przez radcę emigracyjnego, złożyli oficjalny wniosek o jego przeniesienie na inną placówkę dyplomatyczną. Na odejście Szawleskiego nie zgodził się jednak konsul generalny, Stefan Ludwik Grotowski. W 1923 roku w centrali Ministerstwa Spraw Zagranicznych rozważano zatrudnienie Szawleskiego w Konsulacie RP w Detroit, do czego jednak ostatecznie nie doszło. Tymczasem już pod koniec 1923 roku Szawleski wszedł w konflikt ze swoim bezpośrednim przełożonym. Konsul generalny oskarżył go o udostępnienie prasie polonijnej informacji stawiających w niekorzystnym świetle polską służbę konsularną w USA. W odpowiedzi wicekonsul przesłał do centrali MSZ swoją krytyczną ocenę pracy Grotowskiego. Jego elaborat został jednak odrzucony przez departament konsularny MSZ, na co Szawleski zareagował złożeniem dymisji. W lutym 1924 został odwołany z placówki, definitywnie kończąc tym samym pracę w służbie zagranicznej.