Historia MetaCrawler został pierwotnie opracowany w 1994 roku na Uniwersytecie Waszyngtońskim przez doktoranta i profesora jako projekt kwalifikacyjny doktora Erika Selberga. Pierwotnie został stworzony w celu zapewnienia niezawodnej warstwy abstrakcji programom wyszukiwarek internetowych w celu badania struktury semantycznej w sieci WWW. Była to jednak usługa sama w sobie użyteczna i wiązała się z wieloma wyzwaniami badawczymi. MetaCrawler nie był jednak pierwszą metawyszukiwarką — wyprzedził ją SavvySearch, opracowanego na Uniwersytecie Stanowym Kolorado, choć uruchomiony został zaledwie cztery miesiące przed MetaCrawlerem. MetaCrawler jako usługa został uruchomiony 7 lipca 1995.
Pod koniec 1995 roku MetaCrawler oferował dostęp do sześciu usług: Galaxy, InfoSeek, Lycos, Open Text, WebCrawler i Yahoo.
Właściciele MetaCrawlera nie byli w stanie określić rozsądnego modelu biznesowego, więc w styczniu 1997 roku sprzedali go startupowi internetowemu Go2Net, którego zainwestował później współzałożyciel Microsoftu Paul Allen 54 procent udziałów. Go2Net wszedł na giełdę Nasdaq w kwietniu 1997.