История поисковых систем от создания и развития до наших дней

Поисковая система — позволяющий ориентироваться среди миллионов страниц в интернете. Все знают про поисковые системы и про их важность в жизни, но мало кто задумывался об их происхождении. История возникновения поисковых систем началась в 80-90-х годах и прошла через многое.

Мы расскажем Вам о основных ступенях, создания и развития глобального поиска в интернете.

Предпосылки возникновения поисковых систем

Цель всех поисковых систем — найти и отранжировать данные, найденные в интернете. До разработки поисковиков интернет представлял собой набор сайтов, по которым пользователи переходили вводя прямой адрес сайта, или пользовались специализированными каталогами и списками сайтов. По мере того, как список веб-серверов увеличивался в несколько раз, возрастала потребность в улучшенном поиске.

Дополнительная информация. Первую идею по созданию общего архива для всех мировых данных реализовали в 1945 году. Ванневар Буш опубликовала научную статью, в которой предложила собирать данные и исследования, извлекая из них самое полезное.

Перенесемся в истории создания и развития поисковых систем на полвека вперед. Публичные FTP-серверы были распространены в конце 1980-х, но не было простого способа найти информацию или файлы, если не известно имя и местоположение документа, а также адрес сервера.

Все это изменилось, когда в 1990 году студент Алан Эмтаж создал Archie, первую поисковую систему, которая индексировала и находила FTP архивы. Веб-каталоги и поисковики постепенно приобрели популярность, став предпочтительным методом поиска в Интернете. Основные этапы истории развития поисковых систем приходятся на период с 1993 по 1998 год.

Создание первых поисковых систем

Большинство первопроходцев создания поисковиков, уже вто время понимали потенциал интернета и все его, преимущества. Они так же понимали глобальность

Индексатор FTP файлов Archie

Archie часто считают первой настоящей поисковой системой. Хотя были и ранее разработанные технологии, Archie вошел в историю поисковых систем как первый инструмент для поиска контента, а не пользователей.

Дополнительная информация. Archie состоял из двух компонентов:

• сервер, который индексировал содержимое общедоступных FTP-серверов;
• инструмент поиска, используемый для запроса имен файлов, которые были проиндексированы на сервере.

По современным меркам поисковик работал довольно грубо, но тогда он стал огромным шагом вперед.

Поиск по заголовкам страниц Wandex

В 1993 году Мэтью Грей разработал Wandex, первый поисковик в той форме, которую мы знаем сегодня. Wandex сканировала сайты и искала по заголовкам проиндексированных страниц в Интернете. В 1994 году поисковик WebCrawler, основанный на технологии Wandex, начал индексировать полный текст сайтов, а не только заголовки.

Каталоги Yahoo!

Система Yahoo! была основана в 1994 году. Одним из ее крупнейших вкладов в интернет-поиск стала служба каталогов, состоящая из большой коллекции авторитетных сайтов. В 2001 году Yahoo! начал взимать плату за включение в свою подборку.

В октябре 2002 году Yahoo стала поисковиком в привычном понимании и активно его монетизировала. Создатели представили и сделали популярным ряд элементов, которые все еще используются многими, в том числе поиск только по изображениям, только по новостям и так далее.

Возникновение и развитие поисковой системы Google

В январе 1996 года студенты Стэнфордского университета Ларри Пейдж и Сергей Брин начали исследовать концепцию нахождения информации в интернете. Они считали, что поисковые системы должны анализировать и ранжировать сайты в зависимости от того, сколько раз слова, используемые при поиске, появлялись на веб-страницах.

Исследования привели к разработке алгоритма анализа ссылок PageRank, которая стала основой для Google. Именно он помогает определить важность сайта при поисковой выдаче.

Обратите внимание. У PageRank есть две основные идеи:

• когда многие веб-сайты ссылаются на веб-страницу, это говорит о том, что она полезна и заслуживает доверия;
• ссылки с полезной и заслуживающей доверия веб-страницы являются более ценными и заслуживающими доверия, чем ссылки с ненадежной веб-страницы.

PageRank оказался отличным способом выявления полезных веб-сайтов, и пользователи быстро поняли, что результаты поиска Google более полезны, чем от других систем. В результате пользователи быстро стекались в Google, а другие поисковики пытались наверстать упущенное.

К 2002 году Google занял лидирующее положение на рынке. Начиная с 2004 года доля Google на рынке неуклонно растет, а компания ежегодно расширяется и выдает новые продукты.

Российские поисковые системы

С развитием интернета в России возник вопрос о создании поисковика под кириллический сегмент интернета, не только Россия но и другие страны СНГ (Белоруссия и Украина)

Google плохо понимал русский язык, и в самом начале русский интернет, как и весь мир. использовал каталоги сайтов (Мейл ру и Рамблер Портал), все изменилось с появлением Яндекса, который теперь занимает лидирующие позиции.

Поисковая система Yandex

Яндекс — компания, основанная в 1997 году. Она известна своим набором сервисов, которые охватывают поисковые системы, AI и аналитику.

Благодаря инновациям в искусственном интеллекте и технологиях чтения данных, поисковик Яндекс может легко работать с российской терминологией при поиске на зарубежных ресурсах, благодаря чему в отдельных нишах обгоняет по эффективности Google.

В настоящее время Яндекс — крупнейшая технологическая компания в России, владеющая более 50% доли рынка поисковых систем в стране. Яндекс является четвертым по популярности сайтом в России.

Портал Rambler

Rambler начала работу в октябре 1996 года, на начальном этапе в ней содержалось всего 100 тысяч проиндексированных сайтов. Rambler был не первой отечественной поисковой системой, но ставшей одной из самых популярных.

Вторая версия поисковика начала разрабатываться летом 2000 года, в ней представили функции, которые уже были доступны в конкурирующих системах. Учитывалась морфология, улучшился поиск по каталогам. Важной фишкой поисковика был каталог Rambler’s Top100, куда попадали сто самых популярных сайтов Рунета.

Удачная архитектура продукта позволяла Rambler иметь количество серверов в два раза меньше, чем у Яндекса и в три раза меньше, чем у Aport.

Каталог Mail.ru

Однажды в 1998 году группа программистов выложила на тестовый сайт свое ПО по поддержке почтового сервиса. На сайт нахлынуло множество пользователей, желающих получить красивый электронный адрес с окончанием @mail.ru.

За несколько лет число пользователей выросло до миллиона, а сейчас их свыше 10. На их базе возник самостоятельный поисковик, ставший частью гигантской Mail.ru Group, куда входит ряд сервисов, сайтов и приложений, включая «Одноклассники» и ICQ.

Большую ставку Mail делала на интеграцию с другими своими сервисами и социализацию, как и Яндекс сейчас.

Будущее поисковых систем

Поисковые системы сейчас движутся в сторону оптимизации под мобильные устройства. По статистике, 51% мультимедиа потребляется со смартфонов, Smart TV и прочих устройств, не имеющих отношения к компьютерам. Так как набирать текст на них неудобно, активно развивается голосовой поиск и умные помощники.

Много сил выделяется на улучшение оптимизации результатов и учитыванию особенностей поиска в регионах. Идет активная интеграция с социальными сетями. Например, пользователь может ввести имя любой знаменитости и увидит не только страницы, где он упоминается, но еще и краткую биографию и ссылки на соцсети — обычно это первое, что люди хотят увидеть.

Число подключенных к интернету устройств, домашних хозяйств и пользователей продолжает расти, а поиск представляет собой основной механизм поиска информации и явно останется с нами надолго, а история создания поисковых систем будет пополняться все новыми и новыми представителями.

[autor_bq]