Веб-директории: EINet Galaxy, Yahoo! Directory, Open Directory DMOZ, LII, Business.com, Looksmart

Первую веб-директорию создал уже упомянутый ранее Тим Берненс-Ли. Он назвал ее The WWW Virtual Library. В каждом разделе данной виртуальной библиотеки эксперты пополняли и поддерживали списки сайтов.

Директория EINet Galaxy была основана в январе 1994. Она была организована по тому же принципу, как и большинство директорий в наши дни. Причиной, по которой EINet Galaxy добилась успеха, это то, что она также сочетала в себе черты Gopher и Telnet в дополнение к возможности искать по сети.

В апреле 1994 Дэвид Фило и Джерри Янг создали Yahoo! Directory как коллекцию своих любимых сайтов. По мере того, как количество сайтов росло, им пришлось реорганизовать свою директорию и добавить туда возможность поиска. Что отличает директории от первого бота? Здесь каждый URL сопровождается описанием, составленным человеком. Постепенно Yahoo! Directory выросла в Yahoo! и стала брать деньги с коммерческих сайтов за включение. С течением времени плата за включение выросла. На сегодняшний день она составляет $299 в год. Многие информационные сайты до сих пор добавляются в данную директорию бесплатно.

В 1998 Рич Скрента с небольшой группой своих друзей создали Open Directory Project, который является директорией, которую любой желающий может сохранить частично или полностью для своего личного использования. ODP или DMOZ является самой большой директорией в Интернете, которая поддерживается группой волонтеров. Она появилась из-за чувства неудовлетворенности, которое появлялось у вебмастеров, когда им приходилось ждать включения в Yahoo! Directory.

Librarians' Internet Index или LII - качественная директория, рассчитанная на библиотекарей. Большинство других директорий, особенно те из них, которые берут плату за включение, не так строги к кандидатам на включение.

Из-за того, что ведение директории требует времени, а также из-за отсутствия стандартов в этой области, после того как вы просмотрите 12 топовых директорий, качество всех последующих резко упадет. Также есть много вертикальных или локально ориентированных маленьких директорий. Business.com, например, является директорией, посвященной бизнес-сайтам.

Looksmart была основана в 1995 году. Они конкурировали в основном с Yahoo! Directory, часто то опуская, то поднимая плату за включение. В 2002 Looksmart превратился в поисковик с платой за клик. Это убило лояльность и веру в них их пользователей, но зато позволяло оставаться на плаву некоторое время, пока они продавали свою базу MSN. Проблема заключалась в том, что они стали слишком зависимы от MSN, и в 2003 году, когда Microsoft объявил о демпинге Looksmart, это убило их бизнес-модель. В марте 2002 Looksmart купил поисковик под названием WiseNut, но у них так и не хватило сил заняться им в серьез. Looksmart также владеет каталогом статей, организованным по вертикальным сайтам, но они упустили и этот шанс. В 1998 Looksmart попробовали расширить свою директорию за счет покупки некоммерческой директории Zeal за 20 миллионов, но 28 марта 2006 года Looksmart закрыли эту директорию и надеются получить какое-то количества трафика с помощью Furl - социальной программы для закладок.

Статьи об истории поиска