Właściwości psychometryczne Test charakteryzuje się, według przeglądu dokonanego przez autorów w 2013, medianową powtarzalnością rzędu r=0,56. W większości przypadków słabo koreluje z deklarowanymi postawami, i innymi narzędziami opartymi na samoopisie. Jego trafność prognostyczna jest niska, ale lepsza niż metod samoopisowych. Metaanalizy i systematyczne replikacje badań przedstawiają bardzo mieszany obraz związku wyników testu z zachowaniami i zabiegami adresującymi zmianę postaw.
IAT stało się kontrowersyjne w następstwie przedwcześnie optymistycznych relacji medialnych, które przedstawiały go jako w pełni rzetelny i trafny „wykrywacz kłamstw” i gotową do szerokiego stosowania miarę skrywanych postaw takich jak seksizm czy rasizm. Jak zaznaczają sami autorzy, test może być wykorzystywany do celów naukowych, ale dopóki jego zaplecze psychometryczne nie zostanie głębiej rozwinięte, nie powinien być społecznie stosowany w obszarach mających bezpośredni wpływ na życie – np. przy diagnozie klinicznej, rekrutacji pracowników lub w działaniach wymiaru sprawiedliwości. Na ten moment nie jest jasne, co dokładnie test mierzy, i jak przekłada się to na zachowania.