Jako premier Kirk został zapamiętany przede wszystkim ze swojej wyjątkowo aktywnej polityki zagranicznej. Wspólnie z władzami Australii wszedł w ostry spór z Francją wokół przeprowadzanych przez to ostatnie państwo próbnych eksplozji jądrowych na terenie leżącego na Pacyfiku atolu Mururoa. Oba państwa złożyły wspólnie pozew przeciw Francji do Międzynarodowego Trybunału Sprawiedliwości. Kirk wysłał także na teren atolu dwa nowozelandzkie okręty wojenne, co miało stanowić symboliczny protest przeciw testom jądrowym. Zablokował udział nowozelandzkich rugbistów w zawodach w Południowej Afryce (choć wcześniej np. premier Walter Nash stanowczo odmawiał podjęcia takiej decyzji), a także krytykował USA, m.in. za ich poparcie dla zamachu stanu w Chile w 1973 (przemawiał w tej sprawie na forum ONZ). W 1973 jego rząd zaproponował (a parlament to zaakceptował) ustanowienie święta państwowego obchodzonego 6 lutego – w rocznicę podpisania traktatu z Waitangi, uważanego za najważniejszy dokument założycielski Nowej Zelandii.