Поисковые системы

  • Поисковая система — это прогаммная система, созданная для поиска ресурсов (информация, инструменты, услуги или товары) в сети Интернет.  Работу поисковой системы можно улосно поделить на 3 беспрерывных процесса: кроулинг, индексация и ранжирование.
  • Кроулинг — процесс обнаружения новых или обновленных страниц в Интернет поисковым роботом. Кроулинг инициируется как со стороны поисковой системы (переход по ссылкам) так и со стороны владельцев сайтов (через Google Search Console):Search Console -> Сканирование -> Просмотреть как Googlebot -> Указание страницы ->Добавить в индекс

На этапе проектирования нужно планировать такую структуру сайта при которой количество внутренних ссылок на страницу максимально соответствует их приоритетности. Но даже страницы с низким приоритетом должны иметь внутренние обратные ссылки.

  • Глубина кроулинга — вероятность попадания поискового робота на страницу с высоким уровнем вложенности. Чем выше вероятность попадания робота на глубокую страницу, тем больше глубина кроулинга.

Страницы высокого уровня вложенности (при адекватной структуре сайта) всегда соответствуют низкочастотным поисковым запросам. Если такая страница попадает в индекс поисковой системы, она может ранжироваться по соответствующим запросам и приносить дополнительный поисковый траффик. Именно поэтому максимально повысить глубину кроулинга —  в интересах SEO специалиста.

Как правило, страницы высокого уровня вложенности имеют меншее количество обратных ссылок (со страниц с низким весом). Поэтому для кроулинга глубоких страниц создают сайты с равномерной структурой, повышают общий вес сайтов и строят глубокие ссылки.

  • Частота кроулинга — количество попаданий поискового робота на указанную страницу в единицу времени. Частоту кроулинга сайта роботами Google можно просмотреть в Google Search Console:Search Console -> Сканирование -> Статистика сканированияТакже частоту сканирования можно оценить проанализировав лог сервера.

Даный параметр (если не рассматривать случаи манипуляций) можно использовать как значимый показатель ссылочной популярности страницы. Чем больше ссылок ведет на страницу (и чем больше ссылок ведет на ссылающиеся страницы и т д), тем чаще поисковый бот ее посещает.

  • Поисковый робот (краулер, бот) — компонент поисковой системы. Это программа, главная задача которой — обработка страниц Интернета:
    • Анализ содержимого документа;
    • Сохранение не сервеге поисковой системы (индексация);
    • Переход по ссылкам на новые страницы (кроулинг).

Работа поисковых роботов ограничевается с 2 сторон: со стороны сервера поисковой системы и со стороны обрабатываемого сайта (robots.txt, meta robots).

  • Индексация — сохранение данных веб-страницы (текста и его расположеня на странице, мета тегов, медиа и т д.) поисковым роботом. Сохраненная информация добавляется в сверхмассивнуую структуру — индекс поисковой системы.

Поисковый робот может не добавить страницу в индекс (даже при переходе на нее). В таком случае страница не имеет шансов появиться в поисковой выдаче.

  • Чаще всего это не спланированный сценарий, а вариант, противоречащий главной цели маркетолога — получить поисковый траффик. В таком случае нужно проверить уникальность страницы, robots.txt, meta robots, код состояния при обработке страницы и т д.
  • В некоторых случаях это полезное явление (когда нужно органичить доступ к информации на странице, или когда странице имеет только служебную функцию). Для таких страниц, как правило, рационально использовать сочитание директив noindex, follow. Таким образом поисковый робот не проиндексирует выбранную страницу, но продолжит кроулинг по ее ссылкам.
  • Индекс поисковой системы — совокупность данных о содержимом страниц в Интернет. Проиндексированные страницы конкурируют между собой в поисковой выдаче. Каждая страница в индексе анализируется (анализ ее содержимого — лишь малая часть факторов, влияющих на позицию). Последовательный кроулинг, индексация и анализ информации о каждой странице в Интернет — непрерывные ресурсоемкие процессы, которые выполняет поисковая система для того, чтобы практически моментально выдавать максимально релевантные страницы в ответ на поисковые запросы пользователей.
    • Основной индекс — индекс поисковой системы, в который попадают наиболее качественные страницы. Основной индекс используется как приоритетный источник для формирования поисковой выдачи.
    • Дополнительный индекс — индекс страниц Интернет с более низкими показателями качества. Используется как резерв для дополнения поисковой выдачи когда в основном индексе недостаточно релевантных страниц (то есть практически никогда).Значение для SEO:
      Попадание целевой страницы в дополнительный инедкс говорит об очевидных проблемах с ее качеством, которые нужно исправлять в первую очередь.
  • Алгоритм ранжирования — это программа, которая использует математические формулы для максимально точного сопоставления поисковых запросов и результатов поиска. Более 200 уникальных критериев используются алгоритмами для определения наиболее релевантных, качественных и авторитетных страниц, соответствующих запросу.
  • Google Penguin — кодовое название алгоритма Google, впервые запущенного в апреле 2012 года. Задача алгоритма — борьба с сайтами, использующими неестественные ссылки для манипуляции поисковой выдачей. Точные критерии оценки ссылочного профиля неизвестны, но с большой вероятностью имеют место такие факторы:
    • доля обратных ссылок с использованием ключевого слова в качестве текста;
    • доля ссылающихся доменов с использованием ключевого слова в качестве текста;
    • доля авторитетных доменов среди ссылающихся;Пессимизация происходит на уровне целого сайта.

  • Google Panda — алгоритм, впервые запущеный компанией Google в феврале 2011 года, назван в честь инженера-создателя Навнита Панды. Алгоритм призван понижать позиции низкокачественных сайтов и таким образом давать качественным сайтам больше видимости. Большинство критериев ранжирования имеют неточные формулировки: “качественный контент”, “хорошо отредактированный контент”, “вызывание доверия” и т д).Но есть и критерии, которые можно трактовать достаточно однозначно:
    • “уникальность контента”,
    • “грамматическая правильность текстов”,
    • “фактическая достоверность предоставленной информации”.

Понижение позиций происходит на уровне всего сайта или его категории.

  • Google Hummingbird — алгоритм Google, который стартовал в авнусте 2013 года. Главная задача алгоритма — улучшений анализ цели поискового запроса. Hummingbird описывается как обновление поисковой системы, он включает в себя алгоритмы Panda, Penguin как алгоритмы более низкого порядка.
  • поисковый запросПоисковый запрос — слово или фраза, которую вводит пользователь поисковой системы с целью выполнения определенного действия: получение информации, покупка товаров или услуг. У пользователя есть возможность уточнения запроса с помощью поисковых операторов, автоматического уточнения поисковых запросов а также автоматических подсказок.По популярности поисковые запросы условно делятся на высоко- и низкочастотные.
  • Высокочастотный запрос — часто используется  для поиска.

Чаще всего:

  • Соответствует популярному вопросу;
  • Просто и коротко пишется.

Количество поисков такой фразы высокое, поэтому видимость по этому запросу является гарантией определенного количества трафика.

  • Низкочастотный запрос — слово, которое редко используется для поиска.

Чаще всего:

  • Соответствует непопулярному или узкотематическому вопросу;
  • Является более длинной фразой;

При анализе ключевых слов все параметры запросов  нужно учитывать комплексно:

  • количество поисков в месяц;
  • количество ключевых слов;
  • средняя конверсия.

Выбор ключевых слов для продвижения должен быть согласован с бюджетом, прогнозом окупаемости и выбранной стратегией маркетинга.

По намерению ключевые слова делятся на информационные и коммерческие.

  • Информационный запрос — удовлетворяет информционные потребности пользователя.
  • Коммерческий запрос — связан с покупкой товара или заказом услуг.
  • Брендовый запрос — содержит брендовое имя сайта.

При анализе ключевых слов перспективность коммерческих запросов очевидна (чем и объясняется высокая конкуренция по ним). Но нельзя недооценивать значимость информационных запросов, поскольку они:

  • берут участие в цикле покупки товара (на этом построен контент маркетинг);
  • лежат в основе построения авторитета сайта.

Начальная стратегия продвижения должна являть собой гармоническое сочетание ключевых слов, соответствующих запросам обеих типов. Брендовые запросы — показатель востребованности сайта и появляются с его развитием.  Количество брендовых поисков является показателем вовлеченности и может влиять на ранжирование по коммерческим запросам. Конкуренция по брендовой выдаче низкая и брендовый траффик является выосокоцелевым. Поэтому бизнесам выгодно асоциировать бренд и предлагаемую услугу. Как правило, брендовое имя стараются сделать:

  • релевантным;
  • коротким;
  • запоминающимся.

Поисковый оператор — специальные слова или символы для уточнения поискового запроса.

 

Операторы-символы Google:

  • + — поиск страниц Google+
  • @ — поиск тегов социальных сетей
  • # — поиск хештегов
  • | — логический оператор «или»
  • — — исключение страниц, содержащих данный текст
  • «» — поиск страниц, содержащих точную фразу в кавычках
  • * — обозначение наличия любого слова/символа
  • .. — обозначние диапазона

 

Операторы-слова Google:

  • site: — поиск страниц пренадлежащих 1 домену или поддомену
  • related: — поиск страниц, подобных указанной
  • OR — поиск страниц, содержащих одно из указанных слов
  • cache: — просмотр версии страницы в кэше Google

Можно использовать комбинации поисковых операторов для получения максимально точных результатов. Допускается как последовательное так и вложенное сочетание.

1..50 blogging tips‘ OR ‘epic fails -site:moz.com, где:

  • оператор диапазона (..), оператор «или» (OR) и оператор исключения () — используются последовательно.
  • оператор «или» (OR) включает в себя оператор точного вхождения («blogging tips« и «epic fails«), а оператор исключения () включает поиск в рамках домена (site:moz.com).

Если изобразить операторы блоками, выйдет такая схема:

Другими словами будет осуществлен поиск страниц, содержащих цифру от 1 до 50 и точную фразу «blooging tips» или «epic fails» при чем страницы с сайта moz.com будут исключены с этой выдачи.

Также есть возможность уточнения поиска без знания операторов — Google Advanced Search.

Поисковые операторы используются не для повседневнего поиска, а для анализа сайтов и методик продвижения. Специалист со знанием поисковых операторов может творчески применять их для “интеллектуального” поиска. Поисковые операторы дают возможность существенно (на много порядков) уточнять результаты выдачи и тем самым повышать эффективность поиска. Популярное применение — поиск страниц по их футпринтам для анализа ссылок, построения ссылок и других целей.

  • Релевантность — степень смысловой связи между двумя или более понятиями или темами.  Так, чем более релевантны запрос и поисковая выдача, тем выше точность и качество поисковой системы.
  • Точность поисковой системы (выдачи) — процент сайтов в поисковой выдаче, релевантных поисковому запросу.
  • Полнота поисковой выдачи системы (выдачи) отношение найденных релевантных документов к суммарному количеству релевантных документов в индексе поисковой системы.
  • Автодополнение — предлагаемые поисковой системой варианты окончания текста поискового запроса. Эта функция срабатывает во время ввода поискового запроса.

Для обычных поьлзователей автодополнение служит средством экономии времени. Онлайн-маркетологи могут использовать эту функцию для подбора ключевых слов и анализа брендовых запросов сайта.

  • Уточнение поискового запроса — предложение пользователю совершить уточняющий поиск. В зависимости от ситуации это поиск исправив возможные опечатки в запросе, предолжение поиска по другим видам контента (видео, новости, картинки и т д) или предложение поиска по релевантым запросам.

Эта функция позволяет анализировать, связь с какими сущностями имеет данный поисковый запрос. Данная информация позволяет оптимизировать семантическое ядро а также корректировать контент-план (при необходимости дополнять страницу востребованными типами контента)

  • SERPСтраница поисковой выдачи (SERP) — страница с результатами поиска по ключевому слову. Результаты — это блоки “Title + Description + ссылка”. Ссылки упорядочены в соответствии с алгоритмами ранжирования поисковой системы. SERP Google может иметь множество разновидностей в зависимости от поискового запроса:
    • Дополнение рекламой Google Adwords;
    • Дополнение уточнениями;
    • Брендовые SERP состоят не с 10 (стандартный вариант), а с 7 результатов.

Чаще всего SERP утождествляется и понятием поисковой выдачи.

В зависимости от позиции сайта в SERP а также типа SERP изменяется его CTR — один из параметров, который напрямую влияет на прибыль.

  • Поисковая персонализация — функция поисковой системы, которая позволяет видоизменять поисковую выдачу на основе ряда факторов: истории предыдущих поисков пользователя, его страны и региона а также социальных сетей. Помимо более персонализированного поиска имеются и возможные недостатки — проблемы с приватностью поиска и пузыри фильтров.

Поисковая персонализация влияет на видимость сайта. Так продвижение мультиязычного сайта дает больше шансов при локальной персонализации, SMM — при социальной.

  • “Ссылки сайта” Google (Sitelinks) — функция Google, которая вступает в силу при брендовом поиске. Сайт-бренд отображается не в виде единичной ссылки, а в виде групы ссылок на главную и внутренние страницы сайта. В Google Search Console есть возможность управления ссылками сайта:Search Console ->Вид в поиске -> Ссылки сайта,Указать отображаемые страницы нельзя, поскольку они выбираются автоматически алгоритмами Google. Вместо этого есть возможность удалять неподходящие ссылки.

Отображение ссылок сайта повышает CTR бренда, а настройка отображаемых ссылок позволяет повысить юзабилити.