WebCrawler — це пошукова система та одна з найстаріших пошукових систем, що збереглися сьогодні в Інтернеті. Багато років він працював як метапошукова система. WebCrawler була першою веб-пошуковою системою, яка забезпечувала повнотекстовий пошук.
Історія Брайан Пінкертон вперше почав працювати над WebCrawler, який спочатку був настільним додатком, 27 січня 1994 року в Університеті Вашингтона. 15 березня 1994 року він склав список 25 найкращих веб-сайтів.
WebCrawler було запущено 21 квітня 1994 року з більш ніж 4000 різними веб-сайтами в базі даних , а 14 листопада 1994 року WebCrawler виконав свій 1-мільйонний пошуковий запит на тему «розробка та дослідження ядерної зброї».
1 грудня 1994 року WebCrawler придбала двох спонсорів, DealerNet і Starwave, які надали гроші для підтримки роботи WebCrawler. Починаючи з 3 жовтня 1995 року, WebCrawler повністю підтримувався рекламою, але відокремив рекламу від результатів пошуку.
1 червня 1995 року America Online (AOL) придбала WebCrawler. Після придбання AOL веб-сайт представив свій талісман «Спайді» 1 вересня 1995 року
Починаючи з квітня 1996 року, WebCrawler також включав редагований людьми інтернет-довідник GNN Select, який також належав AOL.
1 квітня 1997 року Excite придбала WebCrawler у AOL за 12,3 мільйона доларів.
WebCrawler отримав оновлений дизайн 16 червня 1997 року, додавши ярлики WebCrawler, які пропонували альтернативні посилання на матеріал, пов’язаний з темою пошуку.
WebCrawler підтримувався Excite як окрема пошукова система з власною базою даних до 2001 року, коли вона почала використовувати власну базу даних Excite, фактично поклавши край WebCrawler як незалежній пошуковій системі. Пізніше того ж року Excite (тоді називалася Excite@Home ) збанкрутувала, а WebCrawler був куплений InfoSpace у 2001 році
Пінкертон, творець WebCrawler, очолював пошуковий підрозділ Amazon A9.com у 2012 році
У липні 2016 року материнська компанія Blucora продала InfoSpace компанії OpenMail за 45 мільйонів доларів, у результаті чого WebCrawler перейшов у власність OpenMail. Пізніше OpenMail було перейменовано на System1.
У 2018 році WebCrawler було перероблено з нуля та змінено його логотип.
Трафік WebCrawler був дуже успішним на початку. Одного разу він був непридатний для використання в години пік через перевантаження сервера. У лютому 1996 року він був другим за відвідуваністю веб-сайтом в Інтернеті, але швидко опустився нижче конкуруючих пошукових систем і каталогів, таких як Yahoo!, Infoseek, Lycos і Excite у 1997 році
Див. також
Aliweb Інфопростір Dogpile MetaCrawler Список пошукових систем Пошукова система Порівняння пошукових систем
Примітки
Посилання