Коллектив Авторов - Цифровой журнал «Компьютерра» № 189

Як умру, то поховайте Мене на могилі, Серед степу широкого, На Вкраїні милій.

Поскольку это самый сильный аргумент из всех, какие мне доводилось слышать, вопроса «в» или «на» с тех пор для меня больше не существует.

К оглавлению

Опубликовано05 сентября 2013

Сегодня нам порой кажется, что известнейшая поисковая система Google существовала всегда — между тем она появилась только в 1998 году. Но, оказывается, самый настоящий веб-поисковик успешно функционировал ещё в 1994 году, задолго до возникновения Google, и его придумал британский программист Джонатон Флетчер.

В начале девяностых интернета, каким мы его знаем сегодня, не существовало: Сеть состояла из нескольких десятков тысяч текстовых страниц, объединённых в никак не связанные между собой блоки при помощи гиперссылок. Никакого поиска по этим страницам не было, и найти нужную информацию, не зная точного адреса, было невозможно.

Первый в мире браузер с удобным графическим пользовательским интерфейсом, рассчитанный на операционную систему WIndows 3.1, появился лишь в апреле 1993 года: он носил название NCSA Mosaicи был разработан в Национальном центре суперкомпьютерных приложений (NSCA) при Иллинойсском университете в США. Это был первый браузер, способный демонстрировать изображения внутри самого текста, а не в отдельном окне.

В браузере Mosaic была специальная страница What’s New («Что нового»), на которой собиралась информация о новых сайтах, появившихся в Сети. Однако чтобы такая информация была добавлена разработчиками Mosaic, создатели сайта должны были обратиться с соответствующей просьбой в Национальный центр суперкомпьютерных приложений. Сегодня сложно это себе представить, но данные вносились в ручном режиме, и об оперативности мало кто задумывался.

Но присутствовала и другая проблема: поскольку этот своеобразный браузерный каталог формировался вручную, ни о каких обновлениях входивших в него сайтов узнать было невозможно. Изменения никак не индексировались, о новом контенте ничего не сообщалось, а ссылки быстро устаревали и становились недействительными.

Как раз в эти годы талантливый студент Джонатон Флетчер(Jonathon Fletcher) завершал обучение в шотландском Университете Стёрлинга по специальности «информатика» (computer science) и очень рассчитывал продолжить образование, поступив в аспирантуру Университета Глазго. Однако финансирование было урезано, и вуз не смог принять нового аспиранта, поэтому Флетчер вернулся в alma mater и устроился на работу в технологический департамент Университета Стёрлинга. Здесь он впервые столкнулся с интернетом и со страницей What’s New браузера Mosaic.

Работая над созданием университетского веб-сервера, Флетчер понял, насколько несостоятельна сама идея, положенная в основу страницы What’s New. Ручное добавление сайтов и невозможность отслеживания обновлений делали её практически бесполезной. А поскольку Флетчер был дипломированным специалистом как раз в области компьютеров, он решил написать программу, способную автоматически индексировать изменения внесённых в список сайтов и позволяющую осуществлять поиск по актуальным страницам.

Так на свет появился первый в мире поисковый робот, «веб-паук», а это именно та технология, которая лежит в основе всех современных поисковых систем, включая Google, «Яндекс», Yahoo! и другие.

Флетчер назвал свою программу JumpStation. Она включала в себя список страниц, которые должен посетить поисковый робот, а также алгоритмы автоматической индексации и посещения всех гиперссылок, которые встречались ему на пути. Процесс должен был продолжаться до тех пор, пока роботу больше некуда будет зайти. Флетчер быстро написал простой в использовании поисковый алгоритм по индексируемым страницам и разместил ссылку на свою страницу на What’s New. Спустя 10 дней после первого запуска JumpStation, 21 декабря 1993 года, «паук» остановился: он проиндексировал 25 тысяч страниц.

К июню 1994 года количество проиндексированных JumpStation страниц достигло уже 275 тысяч. Интернет бурно развивался, и стали очевидны ограничения маленького университетского сервера: ёмкость винчестеров тогда была несоизмерима с современной, а сами жёсткие диски были очень дорогими. Недостаток места вынудил Флетчера ограничить глубину индексирования только названиями страниц и заголовками опубликованных на них текстов, однако даже с такой нагрузкой существующее оборудование справлялось с трудом.