Niektórzy krytycy sugerują, że albumy określonych artystów i z wybranych scen muzycznych uzyskują przychylniejsze oceny, kiedy muzyka na nich zawarta zyskuje większą popularność.
Jednakże największy zarzut stawiany pod adresem Pitchfork jest wycelowany w styl recenzji serwisu. Krytycy zarzucają autorom, że recenzje często mają niewiele wspólnego z opisywaną muzyką, czasami nawet nie opisując albumu, a krytykując jego twórcę całościowo. Pitchfork jest także znany z dawania ocen „0.0” albumom uznanym przez serwis za całkowicie nic nie warte.
System oceniania Recenzje muzyczne Pitchforka używają dwóch różnych systemów oceniania:
Pierwotnie każdy utwór był oceniany na 1 do 5 gwiazdek, ale 15 stycznia 2007 roku strona wprowadziła nowy system o nazwie „Forkcast”. Zamiast oceniania poszczególnych utworów, recenzenci etykietują każdy utwór jedną z opisowych kategorii („New Music”, „Old Music”, „Video”, „Advanced Music”, „Rising”, „WTF”), a także kategorii ulubionych i najmniej lubianych utworów (kolejno „On Repeat” i „Delete”.) Albumom są przyznawane oceny od 0.0 do 10.0.
24 października 2003 roku serwis Pitchformula.com zrobił badanie 5575 recenzji dostępnych w tym czasie na Pitchforku, pokazujące że: