Мировой рейтинг поисковых систем

Типы поисковых систем по способу работы

Индексные поисковые системы собирают информацию в Интернете автоматически, с помощью специальных программ-роботов, посещающих веб-страницы. Они осуществляют всесторонний поиск по ключевым словам. Примерами таких поисковых систем являются Google, AltaVista, HotBot, Яндекс.

Индексная поисковая система состоит из трех основных компонентов:

Агент (паук или кроулер)

Агент – это специальная программа, которая запускается на сервере поисковой системы с целью посещения веб-страниц. Когда агент находит новую страницу, удовлетворяющую алгоритму поисковой системы, он индексирует ее, то есть добавляет в базу данных поисковой системы. Посещать страницы агенту помогает система гиперссылок, благодаря которой программа может бесконечно переходить с одной страницы на другую.

База данных поисковой системы

В ней хранятся все найденные и обработанные документы (индексы). Индекс позволяет быстро совершать поиск и обычно состоит из списка ключевых слов и информации о них (позиции в тексте, веса и др.). База регулярно обновляется, и именно из последнего ее обновления выдаются результаты для поставленного запроса. Частота обновления базы данных – критически важный параметр любой поисковой системы. Чем чаще происходит ее обновление, тем качественнее поисковая система.

Поисковый механизм

Поисковый механизм – интерфейс для взаимодействия пользователя и базы данных, то есть та самая программа, с которой мы непосредственно имеем дело.

Индексные поисковые системы работают по одному общему принципу. Сначала агент начинает сканирование сети с определенного адреса. На сервере создаются индексированные копии документов, своего рода вспомогательные файлы. Затем сохраненные документы просматриваются, определяются гиперссылки с этих страниц, по ним осуществляется переход на новые страницы. После сохранения копий найденных документов весь процесс повторяется. Все веб-страницы, проиндексированные поисковой системой, попадают в базу данных, что позволяет пользователю, формирующему запрос на поиск необходимой информации, мгновенно получить ссылки на нее.

Каталоговые системы поиска содержат тематически структурированный каталог серверов и чаще всего пополняются вручную модераторами. Эти системы устроены так же, как тематический каталог обычной библиотеки. Ссылки в них хранятся по теме категорий. Начав с основной страницы каталога, нужно выбрать ссылку, обозначающую главную категорию, а затем на последующих страницах указывать подкатегории до тех пор, пока не будут достигнуты ссылки на конкретные страницы. Каталог обычно имеет тематическую разбивку на подкаталоги, те в свою очередь могут подразделяться на более мелкие поддиректории и т. д. Ярким примером каталога является система Yahoo.

Индексные поисковые системы и поисковые каталоги отличаются так же, как содержание и алфавитный указатель в книге. Задача и содержания, и алфавитного указателя – помочь найти в книге нужный раздел. Содержание – это пример каталогизации. Алфавитный указатель – пример индексации. Читатель находит в указателе нужный термин и получает номер страницы, на которой он встречается.

Метапоисковые системы –это системы, которые используют для поиска базы данных других поисковых систем. Они посылают запрос одновременно на несколько поисковых систем, каталогов и иногда в так называемую невидимую (скрытую) паутину – хранилище онлайн-информации, не считанной традиционными поисковыми системами. Собрав результаты, метапоисковая система удаляет дублированные ссылки и в соответствии со своим алгоритмом объединяет результаты в общем списке. Примером такой системы может служить российское решение Nigma , использующее для поиска Google , Yahoo , Апорт и Яндекс.

Украинские поисковые системы

Большинство пользователей интернета Украины отдают предпочтение Google. Раньше использовался Яндекс, но в связи с политикой, эта поисковая система в Украине запрещена. Несмотря на это некоторые пользуются нею, заходя через VPN сервисы.

Статистика выглядит так (среднее за год): Google 87.56%, Яндекс 8,75%, Мейл ру 8,75%, Bing 1,03%, Yahoo 0,74%:

Изменения за последний год были не в пользу Яндекса, но самое активное снижение доли было год назад, что можем увидеть в данной статье.

Изменения долей рынка поисковых систем с мая 2020 по май 2018:

В табличном виде, по состоянию на дату 1 мая 2020 такая статистика:

Поисковые системы Украины	Доля, %
89,4
Yandex	7,09
Bing	1,21
Yahoo!	0,84
Mail.ru	0,77
DuckDuckGo	0,41
Baidu	0,23
Other	0,06

Кроме перечисленных сервисов существуют другие проекты через которые тоже можно производить поиск.

Сервисы по поиску информации от украинских разработчиков:

• Sova.com.ua — работает на базе google;
• Gala.Net — каталог;
• Online.ua;
• MetaPing – работает на поиск информации по всему миру;
• Аванпорт – является поисковой системой и каталогом;
• Мета – осуществляет поиск, используя систему Google;
• UA port — производит поиск, как на украинском, так и на других языках;
• Атлас UA – содержит массу информации;
• I.ua;
• Ukr.net;
• Meta.ua;
• Poshukach.com;
• Shukalka.com.ua;
• TopPING – производит поиск по новостям, сайтам украинского интернета.

Мэйл ру

Стремительно сдающий позиции поисковик, держащийся на плаву исключительно благодаря старомодной части интернета, использующей социальную сеть «одноклассники» и общение на «мой мир». Трудно сказать почему, но мэйл ру не вызывает симпатий пользователей. Может быть, из-за старомодного интерфейса, или из-за слишком навязчивой рекламной компании, заставлявшей устанавливать виджеты поисковика, серьезно замедлявшие работу компьютера.

В результате, все, что связано с данной поисковой системой вычищается и удаляется пользователями просто по привычке. Компания неспешно дрейфует в сторону браузерных игр и мморг стратегий. Кроме поисковика, мэйл ру принадлежит видеосервис «ру туб» с некогда амбициозными планами захвата русскоязычного сектора видеопоиска. Не слишком успешное финансовое управление и устаревшая техническая база привели первый русский поисковик с собственной почтовой системой на грань, когда многие еще помнят эту систему, но мало кто пользуется.

Обзор поисковых систем Интернета

Выше мы сделали небольшое описание поисковых систем. А здесь, хотелось бы Вам рассказать о них немного подробно. Когда их создали, и какие у них плюсы и минусы:

1. Google. Эта поисковая система была создана в США в 1998 году. Её создали программисты Сергей Брин и Ларри Пейдж. Сейчас она включает в себя более 25 миллиардов веб-сайтов и её используют 200 миллионов пользователей из разных стран мира. Плюсы этой поисковой системы в том, что можно найти качественную информацию быстрее, чем не качественную. Минусы – нагрузка на компьютер, так как частое обновление Гугла нагружает оперативную память компьютера.
2. ЯНДЕКС. Её создали в 1997 году. Создатели этой поисковой системы – Аркадий Волож и Илья Сегалович. Занимает второе место по популярности в России. Плюсов у этой системы много и  из них – использование электронной почты, кошелька Яндекс деньги, и быстрый доступ к любой информации. Компания установила фильтры поиска, но это не спасает пользователей посещать сомнительные сайты в Интернете. Это один главный минус и недостаток этого поисковика.
3. YAHOO. Поисковик является более старым из всех поисковых систем, которые мы рассматриваем. Его создание принято считать в 1995 году, предпринимателями Джерри Янгом и Дэвидом Филом. Он является достаточно крупным Интернет порталом и у него есть только один минус – не устанавливается на компьютер, а используется через браузер.
4. MAIL.RU. Эту поисковую систему организовали в 1998 году. Её авторы и создатели – Евгений Голанд и Владимир Шутов. Этот портал принадлежит крупной компании – Мейл Ру Групп. Так же включает в себя популярные проекты: Одноклассники, Вконтакте, Мой мир. Пользоваться этим поисковиком удобно. Но минусы в том, что электронная почта от Мейл не имеет хорошей защиты от взлома и нередко браузеры заражаются вирусной рекламой от этой системы.
5. BING. Она была создана в 2009 году. Эта поисковая система работает, как на компьютерах, так и на Смартфонах. В большинстве случаев, ей выгодно пользоваться на телефонах, это считается её главным преимуществом.

Менее популярные поисковые системы

1. DUCKDUCK.GO. Наличие поисковика на компьютере, позволит Вам использовать его в полной мере и вместе с этим сохранить свои конфиденциальные данные. Её создал предприниматель Гэбриель Вайнберг в 2006 году. Эта система не сохраняет во время поиска кэш и историю браузера.
2. СПУТНИК. Как было уже сказано выше, это поисковая система пока ещё не всеми используется. Её создали в 2014 году, и создателем считают компанию Ростелеком. Эту поисковую систему, планирует использовать государство.
3. РАМБЛЕР. Самый известный в Рунете поисковый портал. Создатель портала Дмитрий Крюков – 1996 год. Он существовал до 2011 года, и сейчас по-прежнему работает в полной мере, как поисковая система.
4. BAIDU. Данную китайскую поисковую систему основали в 2000 году, предприниматели – Робин Ли и Эрик Сю. Этим поисковиком пользуется только китайское население. К нему очень негативное отношение во многих странах из-за рекламного вируса и нет возможности перевода языка.
5. TUT BY. Данная поисковая система была создана в Белоруссии в 2000 году. Его основал журналист Сергей Дмитриев. Посещаемость поисковика уже превышает более 2 000 000 пользователей в этой стране.

Известные поисковики за рубежом

1. AOL (Американская поисковая система). Была разработана в США в 90-е годы. У неё довольно слабая популярность среди пользователей.  Работают с поисковиком, в основном, жители Америки.
2. ASK.COM. Создание поисковой системы принято считать в 1995 году. Чтобы пользоваться этой системой, достаточно лишь внести в поисковую строку какой-либо вопрос, и она выдаст результаты. Её поиск распределяет результаты по порядку, и всегда можно найти необходимую информацию и качественную.
3. ECITE. Данная поисковая машина, особо ничем от других не отличается. Сайт был запущен в 1994 году и в данный момент принадлежит компании IAC Search Media. Этот сервис может предлагать пользователям различную информацию в виде обмена быстрыми сообщениями, отправка писем по электронной почте, и имеет полную настройку домашней страницы в браузере.
4. Wolfram Alpha. Он был запущен в Интернет – 15 мая 2009 года. Имеет огромную базу знаний, и мощные вычислительные алгоритмы для нахождения этой информации в поиске.

Итак, эти поисковые системы на сегодняшний день самые лучшие. Думаю, Вы сможете выбрать для себя подходящий вариант. Часто приходиться использовать несколько поисковиков для эффективного поиска нужной информации.

Зачем это бизнесу? Пусть маркетологи и сеошники разбираются, как пользоваться «Вордстатом»

Данные из «Яндекс.Ворстат» и Google Keyword Planner нужно использовать и при создании рекламы, и при комплексном продвижении сайта. Оплачивать услуги агентства или отдельных специалистов, но при этом не иметь представления, по каким запросам пользователей показывается ваша реклама или продвигается сайт, могут только очень богатые люди. Которым важнее процесс, чем результат.

Проверка исполнителей

Я не знаю ни одного человека, который бы при ремонте квартиры или дома просто перевел строительной компании деньги и сказал: «Ну, вы профессионалы, просто сделайте мне хороший ремонт, я в этом не разбираюсь». Когда речь идет об интернет-маркетинге – это нормальная ситуация. Бизнес как-то платит деньги, специалисты как-то продвигают сайт. Если заказчик не имеет представления, какой и почему возможен результат – все примерно так и работает.

Если вы знаете, что ищут ваши клиенты, вы понимаете, что на сайт всегда можно добавить новый контент. Это касается и SEO и контекстной рекламы. Если статистика показывает сотни и тысячи вариантов целевых запросов, а ваши исполнители работают с 20-ю запросами, то вы теряете деньги.

Узкие ниши

«Вордстат» – не волшебная палочка, это инструмент. Если исполнитель не понимает нишу, не владеет основными терминами (а их бывают десятки даже в самых повседневных нишах), то заказчик теряет на этом трафик и деньги. Самая повседневная ниша, которая есть в любом городе – ПВХ окна. Терминов, определяющих нишу – не одна сотня. Наверняка, у вас стоят стеклопакеты дома. А вы знаете, что такое импост, к-стекло, обсадная коробка, ПСУЛ, триплекс, фрамуга, штульп, шпрос?

Чтобы было понятно – ни один из этих запросов «Вордстат» мне не выдаст, если я буду искать по базовым запросам вроде «стеклопакет», «ПВХ окно», «ПВХ профиль». В то же время для бизнеса – клиент, который знает эти термины, скорее всего не разовый заказчик, а подрядчик или прораб, с которым можно сотрудничать долгосрочно.

В целом, отсутствие связки «заказчик – исполнитель» заметно. Вот спрос по Москве:

И он никак не отражен в рекламе. Только 1 объявление содержит целевое слово:

Чем меньше конкуренция в нише – тем больше таких забытых групп интересов пользователей.

Термины, аббревиатуры, артикулы, синонимы

Здесь все просто, без данных со стороны заказчика нормально собрать целевые запросы нельзя. Если весь бизнес завязан на названия (автозапчасти, например), то владельцу сайта придется очень плотно работать с исполнителями. Иначе велик риск:

• Продвинуть низко маржинальные товары или услуги.
• Слить рекламный бюджет из-за несоответствия объявления или страницы интересу пользователя.

Вот иллюстрация второго примера – хостинг рекламируется по запросу с маркировкой акриловой краски. По результатам выдачи видно, что на самом деле ищет пользователь:

Дальше в статье будут примеры, как вроде бы богатая на разные запросы ниша превращается в тыкву. Для проверки вашей тематики нужно будет освоить азы работы с «Вордстатом».

Принцип работы информационно-поисковых систем: критерии ранжирования

Если вы хотите, чтобы ваш интернет-ресурс входил в тройку или хотя бы десятку поисковой выдачи, нужно знать принципы работы поисковых систем и критерии ранжирования, чтобы постоянно оптимизировать сайт под их требования. Выделяют две основных группы таких критериев:

Текстовые критерии поисковой системы.

Поисковая система в этом случае ранжирует страницы исходя из качества их текстового контента. Оптимизация этой составляющей сайта предполагает работу с семантическим ядром еще на этапе создания и наполнения интернет-ресурса.

Поисковик, обрабатывая запрос пользователя, на первой странице выдачи покажет наиболее релевантные результаты. В процессе поиска документов поисковая система анализирует правильность заполнения титульной фразы (title), описания страницы (description) и наличие ключевого запроса в заголовках (H1, H2 и т. д.).

Нетекстовые критерии поисковой системы.

Поисковая система проводит работу по анализу этих критериев после того, как сайт опубликован и проиндексирован. Основной принцип ранжирования по критериям этой группы — это оценка не качества их контента, а внешнего ссылочного профиля.

Поисковик анализирует количество ссылок на сайт с других интернет-ресурсов, оценивает их авторитетность, смотрит регистрации в каталогах. Если проводить аналогию, то поисковая система, как банк, который принимает решение выдать фирме кредит, собирает отзывы о ней от контрагентов, поставщиков, других кредиторов.

Знание принципов работы поисковых систем поможет вам создавать и оптимизировать сайты, которые легко будут занимать первые позиции в поисковой выдаче и долго там находиться, так как соответствуют поисковым запросам пользователей.

Вас также может заинтересовать: Что делать, если упала посещаемость сайта

Война с Google в России

Напомним, Google является основным конкурентом «Яндекса» на российском рынке мобильного поиска. В 2014 г. российская компания разработала собственную кастомизированную версию Android — Yandex.Kit, в которой были предустановлены поиск и другие приложения от «Яндекса». Некоторые производители смартфонов второго эшелона — Explay, Prestigo, Fly — попробовали выпускать смартфоны на ОС «Яндекса», но затем под давлением Google были вынуждены отказаться от этого.

Оказалось, что условия GMS обязывают производителей смартфонов вместе с Google Play предустанавливать и другие приложения от Google, размещать на экране пользователя ярлыки для них в определенном порядке, а также устанавливать по умолчанию поиск от Google. В 2015 г. Федеральная антимонопольная служба (ФАС) обязала Google прекратить подобного рода практику, исключив из договоров с контрагентами соответствующие пункты.

После нескольких штрафов и попыток Google оспорить решение ФАС в суде, стороны нашли компромисс. В частности, Google обязалась отказаться от предустановки своих приложений для Android на эксклюзивной основе, не мешать предустановке приложений конкурентов и не создавать экономических стимулов для предустановки своей поисковой системы в качестве поисковика по умолчанию в Google Chrome.

Также Google обязалась создать для российских пользователей Google Chrome поисковый виджет, который обеспечит им возможность выбрать поисковую систему по умолчанию — Google или «Яндекс». Данный виджет был предустановлен в новые смартфоны на базе Android, в существующих смартфонах он появился после обновления системы. В меню выбора данного виджета была добавлена также российская поисковая система Mail.ru.

• Короткая ссылка
• Распечатать

Метапоисковые системы

Dogpile – связана с Google, Yandex и Yahoo.

Nigma – инновативная метапоисковая система России (закрылась в 2017 г).

OpenText – имеет связь с Google, Bing и другими.

Fagan Finder – поисковая система с возможностью выбрать интересующую поисковую систему и рубрику.

Поисковые системы поиска людей

Spokeo – собирает все данные из онлайн и оффлайн источников и позволяет вести поиск используя имя, электронную почту, контактный номер телефона либо адрес.

Pipl – поиск информации о людях, которую нельзя найти через обычные поисковые системы, а именно – имя пользователя, номер телефона и электронная почта.

PeekYou – опознает людей из разных социальных сетей по имени, электронной почте, номеру телефона, адресу, местоположению и т.д.

Vebidoo – отображает общедоступную информацию о людях и позволяет узнавать их имя, местоположение и т.д. (Германия).

Spysee – новейшая поисковая система по поиску людей, направленная на социальные сети (Япония), в данный момент закрыта.

Поисковые системы новостей

• Digg – накопитель и хранилище новостей.
• YouGotTheNews – поисковая система новостей и статей США.
• NewsLookup – поиск последних новостей по всему миру.
• Elephind – поисковая система исторических новостей.
• NewsLibrary – поисковая система по нахождению фактов и новостей.

Поисковые системы для блогов

Ниже приведен список узкофункциональных поисковых систем для блогов, основанные на их категориях.

• Blog Search
• Blog Search Engine
• Twingly Blog Search
• Find Blogs

Другие поисковые системы

DMOZ (закрылся) – многоязыковой открытый каталог в интернете. Он использует иерархическую онтологическую схему внесение списков сайта и позволяет проводить поиск веб-сайтов.

FoodBlogSearch — поисковая система кулинарных рецептов, связанная с Google Custom Search. Позволяет находить более 1000 рецептов в блогах и на сайтах всей сети интернет.

Swoogle – осуществляет семантический веб-поиск документов, терминов и информации, публикуемой в интернете. В отличии от других поисковых систем, она имеет специализированный характер.

SimilarSiteSearch – помогает найти вам близкие, похожие либо альтернативные веб-сайты.

Shodan – поисковая система, позволяющая пользователям находить устройства (компьютеры, роутеры, сервера и т.д.) имеющие доступ в интернет. Она собирает данные в основном из социальных серверов.

Blackle – функционирует с помощью Google Custom Search, сохраняет запасы энергии, отображая темный фон. Позволяет пользователям вести поиск интернет-страниц и изображений.

Blinkx – медиа-платформа с показателем более 35 миллионов часов просмотра видео. Позволяет проводить поиск видео по категориям.

NerdyData – поисковая система, обеспечивающая любителям программирования поиск технологий, языков, библиотек и многого другого.

SearchCode –поисковая система документаций, которая предоставляет программистам возможность поиска функций или фрагментов кода.

Open HUB Code Search – поисковая система для разработчиков кодов, позволяет программистам заниматься поиском соответственного общедоступного программного кода, функций и др.

Polyvore – социальный коммерческий веб-сайт, управляемый сообществом. Позволяет узнавать самые свежие новости тенденции моды и красоты.

Yummly – обширная библиотека, поисковая система для гурманов. Позволяет узнавать и исследовать кулинарные рецепты, доступные в разных категориях (даже по сезонам).

Pronto – сервис товаров и сравнения цен, который позволяет найти необходимые товары среди множества розничных торговцев и магазинов. Аналог украинских/российский прайс-агрегаторов, типа Яндекс.Маркета.

Discounto – позволяет пользователям находить и приобретать скидки, а также получать выгодные предложения от различных розничных торговцев и местных владельцев магазинов. Также он оповещает о последних и ожидаемых предложениях. Аналог «скидочных» сервисов, которые представлены в широчайшем ассортименте в СНГ, например, Скидочник (агрегатор скидок в Украине), Купоника (Россия).

AZLyrics – портал лирики, поисковая система, направленная на поиск лирики, используя фразу, песню, название альбома, показывает слова вашей любимой песни.

AnooX – социальная сеть на основе поисковой системы. В отличии от многих других поисковых систем, в ней применяется рейтинг людей.

OneLook – поисковая система слов и фраз. Позволяет находить слова и их значения в более 1000 словарях и способна к их воспроизведению.

Вольный перевод и редактура текста с сайта hongkiat.com

Как правильно гуглить?

На просторах интернета распространена версия, что места в топе выдаче выдаются не по релевантности сайтов запросу, а в зависимости от того, кто больше заплатит. Причем не тому, кто отвечает за SEO-продвижение, а напрямую поисковику. Утверждение это спорное, но не безосновательное: тот же Google легко идет на ухудшение выдачи в угоду контекстной рекламе. Некоторые пользователи и вовсе предлагают осуществлять запросы только через частный доступ, чтобы не наблюдать потом рекламу по теме запроса. Но это тема отдельной статьи, а в рамках этой мы расскажем про язык поисковых запросов.

Этот язык зависит от выбранного поисковика и состоит из морфологии, регулярных выражений, а также логических операторов, префиксов обязательности, возможности учета расстояния между словами, возможностей расширенного или уточненного поиска. Звучит сложно, поэтому сразу перейдем к конкретике.

Избегайте грамматических ошибок

Правило, с которого стоит начать, — будьте грамотны. Сегодня поисковики автоматически исправляют допущенные пользователями ошибки и даже ошибочно выбранную раскладку клавиатуры, но эта функция работает не всегда. Получили в выдаче ссылки на сомнительные ресурсы — перепроверьте запрос. Обратное тоже верно: иногда поисковики автоматически исправляют даже нужные пользователям запросы.

Формулируйте

Некорректно сформулированный запрос приведет к некорректной выдаче. Общие и односложные запросы не содержат конкретики. Не оставляйте поисковик в недоумении — ищете вы историю появления смартфонов, планируете его отремонтировать или только собираетесь купить.

Конкретизируйте

Конкретика поможет поисковику собрать нужную именно для вас информацию. Например, если вы планируете купить смартфон определенной модели и цвета, то эти характеристики стоит вписать в строку сразу, а не ограничиваться абстрактным запросом «купить смартфон».

Если вас не удовлетворили полученные результаты, то сформулируйте запрос иначе. Например, используя синонимы.

Добавьте символов

Определенный ряд символов поможет сделать поиск еще эффективнее:

• префиксы обязательности + и — используются, если надо включить или исключить из результатов поиска определенную информацию;
• восклицательный знак ! используют для указания точной словоформы. Иначе поисковая система предоставит результаты вне зависимости от числа или падежа;
• кавычки …используют для поиска точной фразы.

Еще можно задать поиск в пределах одного сайта, по названию страниц или по названию ссылок, а также по файлам с определенным разрешением. Возможности расширенного поиска предполагают использование словарного фильтра, даты, языка, изображения и формата выдачи. Одним словом, все, что сделает использование поисковой системы еще удобнее для пользователя.

Поделиться

Yandex

В рейтинге основных российских поисковых систем первое место занимает именно «Яндекс». Это российская транснациональная компания, которая зарегистрирована в Нидерландах. Она имеет одноименную поисковую систему, интернет-портал, службы в нескольких странах. В конце 2018 года рейтинг Alexa поставил «Яндекс» на 21-е место в мире и первое — в России.

Впервые система начала работать в 1997 году. Спустя 3 года решено было создать самостоятельную компанию. Активнее всего система развивается в России, Турции, Белоруссии и Казахстане. Ранее была популярна на Украине, до того как ее заблокировали на территории страны.

О принципах работы всех поисковых систем простыми словами

Поисковая система — специальная программа с удобным веб-интерфейсом, с помощью которой пользователи могут быстро и легко искать необходимую информацию в Сети. Рассмотрим принцип работы любого поисковика без углубления в детали и техническую терминологию.

Для того чтобы поисковая система могла выдавать пользователю список ссылок страниц, на которых содержится информация по поисковому запросу, она должна знать содержание контента всех разделов каждого сайта. Как поисковик собирает эти данные?

Интернет — это особая сеть, состоящая из отдельных страниц, ссылающихся друг на друга. Поисковой системе не обязательно заходить на каждую из них, достаточно иметь информацию о сайтах и каталогах с самыми высокими рейтингами, чтобы аккумулировать данные о страницах для последующего закачивания.

Поисковик, по сути, создает предметный указатель, в котором адреса всех интернет-страниц сгруппированы особым образом. Если в Сети появился новый сайт, на который не ссылаются другие ресурсы, то поисковой системе будет трудно его найти, чтобы проиндексировать и занести в свою базу.

После того как поисковик сформировал список страниц, начинается процесс индексации (работа по скачиванию с них всех данных). С помощью специально созданных для этих целей программ поисковая система записывает новую информацию или перезаписывает старую, удаляя неактуальные сведения. Работа по индексации сайтов в Интернете идет непрерывно.

Программы собирают данные во временное хранилище. Там они накапливаются до определенного количества, после чего запускается процесс апдейта, основной принцип работы которого — актуализация информации в основной базе поисковой системы.

В индексе поисковиков находится огромное количество страниц. Когда пользователь вводит запрос в поисковой строке, поисковая система отбирает релевантные ссылки из своей базы. Другими словами, она составляет список сайтов, на страницах которых упоминаются ключевые слова, заданные пользователем.

Так как внутренняя база поисковой системы огромна, то поисковая выдача может содержать десятки страниц. Как же поисковик их ранжирует? По какому принципу определяет, какие страницы показывать пользователю в первую очередь? Все страницы сортируются по соответствию контента поисковому запросу. Чем выше показатель полноты содержащейся на странице информации, тем ближе будет страница к началу списка.

В настоящее время поисковые системы применяют машинное обучение для ранжирования страниц в поисковой выдаче. Принцип действия этого процесса можно рассмотреть на абстрактном примере.

Допустим, нам нужно обучить робота отличать спелые яблоки от неспелых. Программа для определения свойств фрукта ориентируется на его характеристики:

• цвет;
• размер;
• твердость;
• содержание сахара;
• содержание кислоты.

Для анализа роботу дают два яблока: незрелое и готовое. Он их сравнивает. Затем проводим обучение машины — показываем, какие характеристики яблока являются положительными, какие отрицательными. Объясняем, по какому набору параметров фрукт можно отнести к спелому или нет.

Таким образом, у нас есть алгоритм для анализа яблок, с помощью которого робот может их самостоятельно сортировать. Теперь можно давать не два фрукта, а гораздо больше, машина будет сама их делить на спелые и незрелые.

Подобный принцип работы заложен в работе поисковой системы. Есть специалисты, занимающиеся обучением машин алгоритмам сортировки контента. Сначала они самостоятельно анализируют страницы, попавшие в выдачу по поисковому запросу, разделяя их на релевантные и нерелевантные. Затем обучают робота сортировать страницы.

Релевантность страниц — это показатель в виде дробного числа. Каждой странице присваивается свое значение релевантности. Потом все ресурсы сортируются в порядке убывания этого показателя. В ТОП поисковой выдачи попадают самые релевантные сайты.

Помимо основного алгоритма сортировки, поисковые системы используют различные дополнительные, которые также могут влиять на поисковые результаты. Например, с их помощью можно фильтровать недобросовестные сайты, использующие разные «серые» схемы для продвижения.

Вас также может заинтересовать: Эффективное продвижение сайта – сложно, но возможно с нашей подсказкой

Yandex.ru

Yandex.ru – наиболее популярна в пределах русскоязычного Интернета. Поисковые запросы можно писать как на английском, так и на русском языке. Девиз сайта Яндекс «Найдется все!» и действительно, им обеспечивается качественное и быстрое предоставление информации.

Лично я этим поисковиком пользуюсь же более 10 лет по умолчанию и мне он безумно нравится. А для любого веб-мастера он имеет просто огромное значение, так как любой из них в лепешку расшибается ради того, чтобы его сайт находили именно в этой системе.

Он обладает огромной индексной базой, а значит, может найти практически все. Вывод найденной информации отличается рациональностью. Яндекс непрерывно развивается. Он предлагает все больше востребованных сервисов, например, новости, карты, прогноз погоды, электронная почта, Яндекс. деньги. Кстати я тут писал интересные факты про яндекс, так что если вас это интересует, то обязательно почитайте.

На сегодняшний момент доля использования яндекса в России составляет около 56 процентов. То есть большая часть населения страны предпочитает использовать именно этот обозреватель.

Под какие поисковики продвигать сайты

Меня, как вебмастера и оптимизатора, больше всего интересует вопрос – под какие поисковики продвигать свои сайты. В данном случае, ответ очевиден – там, где есть трафик, там и лежит сфера моих интересов.

Если поисковая система не популярна,  то посетителей с нее получить не получится никак.

В настоящее время, в русскоязычном интернете внимания заслуживают 3 поисковика – yandex.ru, google.com и go.mail.ru, причем, на долю первых двух приходится 93% трафика, а вся тройка концентрирует у себя почти 99% посетителей – лучше попасть в ТОП 10 чемпионов, чем в ТОП 1 всех остальных поисковых машин.

Хотя, чаще всего, высокие позиции в Яндекс и Гугл обеспечивают примерно тот же уровень ТОПа и в других системах.

Для того, чтобы процесс продвижения был более эффективным и у вас была возможность контролировать различные параметры своих проектов – обязательно используйте инструменты для вебмастеров, предоставляемые описанными выше сервисами:

• Яндекс Вебмастер – webmaster.yandex.ru (инструкция как добавить и настроить);
• Google Webmaster – google.com/webmasters/;
• Mail Webmaster – webmaster.mail.ru.

Туда надо добавить свой сайт, и вы сможете отслеживать то, как поисковики видят и оценивают их.

Какой поисковик использовать

О наиболее популярных системах я рассказал выше – их преимущество появилось не просто так – за ним стоят годы разработок и нововведений, благодаря которым качество предоставляемой информации лучше, чем у конкурентов.

Есть, конечно нюансы, на которых мы остановимся:

Yandex

Самый популярный поисковик России. Большинство людей считает его лучшим благодаря множеству сервисов (Яндекс почта, Яндекс деньги, Яндекс карты и пр.), наличию коммерческих модулей (Яндекс Маркет, Яндекс Директ), строгой системе модерации рекламных площадок для РСЯ, жесткому контролю за рекламодателями и многим другим фишкам – Яндекс идеально подходит для работы с коммерческими запросами. А геотаргетинг, который учитывает местоположение пользователя с точностью до населенного пункта, затыкает за пояс всех конкурентов.

Учет сотен факторов, включая поведение пользователей на страницах сайтов, делает не менее качественным и информационный поиск.

Модуль Яндекс Маркет, вообще, можно считать отдельным поисковиком по интернет магазинам, так как сам он ничего не продает, а объединяет в каталог множество отдельных проектов с их товарами.

Крупнейший поисковик в мире. Лишь некоторые страны могут похвастаться наличием реальных местных конкурентов (Яндекс в России), так что рынок Гугл огромен. Пока в России этот сервис в роли догоняющего, но отставание от лидера сокращается очень быстро, в основном, благодаря мощной монополии на мобильный поиск (все устройства на ОС Android используют Google поиск по умолчанию).

В коммерческом плане Гугл значительно уступает Яндексу, так как геотаргетинг у него работает только в масштабах страны, как вы понимаете – Калининград и Владивосток регионы не очень близкие и для покупки стиральной машины им в ТОПе нужны разные сайты, чего американец пока не делает.

Между тем, информационный поиск здесь реализован прекрасно, особенно новостной. Google быстрее индексирует новые статьи на сайтах (они быстрее попадают в поиск).

Mail

Данный проект в большей степени ориентирован на развлекательные сервисы, поэтому, go.mail.ru (собственно поисковик) не является его главным модулем. По качеству он сравним со старшими конкурентами, но мне не известны какие-либо особенные его фишки, которые бы помогли существенно увеличить долю на рынке.

Nigma

Популярность поисковика очень мала, так как это бесплатный проект, создаваемый на общественных началах студентами и преподавателями МГУ. Коммерческой цели он не преследует, соответственно и в раскрутку не вкладывает.

О ее фишках, не имеющих аналогов я уже писал выше – это решение задач по химии и математике, поиск по аудио файлам, торрентам, книгам. Кроме того, имеется возможность уточнять запросы через систему фльтров, получая идеальные результаты выдачи.

Ищете хороший поисковик – рекомендую.

Rambler

Один из старейших российских поисковиков, появился раньше Яндекса. Но, в какой-то момент проиграл битву за рынок, не выдержав конкуренции. Сейчас Рамблер больше напоминает информационный портал со множеством сервисов (включая электронную почту).

Для поиска Ramler.ru использует технологии Яндекса, поэтому говорит о том, что это самостоятельный поисковый алгоритм не приходится.

Bing

Пожалуй, единственный из западных поисковиков, который хоть как-то известен в русскоязычной части интернета, да и то, благодаря тому, что это детище Microsoft (разработчика Windows), который пихает его во все свои продукты.

В англоязычном интернете качество его поиска на уровне, для нас он недостаточно адаптирован и не составляют конкуренцию.