Содержание:
Качество индексации сайта в процессе его раскрутки может иметь решающее значение. Под индексацией следует понимать попадание информации со страниц сайта в базу данных поисковой системы. Поисковый робот или краулер – средство сканирования сайта. Он пробегает по всей его структуре в рамках установленного лимита (краулинговый бюджет), совершает быстрый скан и добавляет найденную информацию в индекс.
При этом само сканирование не занимает много времени. Обращаясь к файлу robots.txt, бот поисковика действует согласно пунктам приватности, указанным в настройках файла. Так что это быстрый процесс. Другое дело сама индексация. Скорость добавления данных зависит от ряда факторов, поэтому важно держать этот процесс на контроле.
Отсюда возникает вопрос - какая именно информация попала в базу поисковика? Ведь от этого напрямую зависит «видимость» страниц сайта в поисковой системе. И как проверить качество индексации сайта поисковиком? Рассмотрим основные методы, которые применяют СЕО-специалисты в данном вопросе на примере поисковой системы Google.
Наиболее надёжным способом проверить индексацию сайта в системе Google является панель вебмастеров. Для этого надо иметь доступ к оной. Если таковая возможность у нас есть - заходим, ищем меню Search Console, где находим вкладку Индекс Google. Там выбираем Статус индексирования.
Как можно догадаться, так выглядит динамика стабильности с последующим снижением количества страниц в базе поисковика. Налицо проблема с индексацией. Причиной могут быть настройки в файле robots.txt, и не только.
Рядом с отметкой «Проиндексировано всего» указано число адресов, найденных роботом поисковика Гугл в ходе сканирования, и добавленных в индекс. Число URL индексации всегда намного меньше, чем общее количество обработанных адресов. Причина понятна – в индекс не добавляются повторы URL, а также те адреса, что защищены от доступа строкой Disallow в файле robots.txt и метатегом noindex в секции head разметки html.
В расширенном виде Search Console в Google можно увидеть ещё 2 пункта проверки. Это количество URL, которые были заблокированы через robots.txt, а также число удалённых адресов.
Плохо не только резкое снижение количества добавленных в индекс URL. Резкий скачок вверх говорит о засорении процесса индексации. Оптимально, когда кривая плавно стремится вверх. Таким образом, с помощью панели вебмастера в Гугл можно легко проверить степень качества и баланса индексации страниц.
Поисковая система Гугл обладает набором подручных средств, которые помогают детализировать вводимый в поисковую строку запрос по сайту. Это так называемые поисковые операторы. Они позволяют быстро получить определённую информацию по индексации страниц, проверить степень их обработки поисковым роботом как в целом, так и в деталях.
Перечислим некоторые из операторов Google, к которым часто прибегают SEO-специалисты с целью уточнить результаты поиска и проверить уровень взаимодействия сайта с поисковыми ботами.
Оператор Site выводит список страниц, занесённых в индекс. Пример – site:[адрес сайта]. Это удобно не только для анализа своего сайта, но и при анализе страниц конкурентов ниши.
Оператор Intitle показывает страницы с заданным целевым словом или фразой в заголовках (тайтлах). Пример: intitle:[индексация сайта]. «Индексация сайта» в данном случае - искомая фраза.
Ещё один важный оператор Cache позволяет проверить частоту посещения сайта поисковым роботом. Оператор Inanchor предназначен для вывода количества страниц со ссылками с участием ключевого слова. Есть ещё немало полезных операторов – Link, Related, Inurl, Info.
Система Google располагает множеством средств, позволяющим проверить степень видимости страниц поисковиком.
Поисковая система Гугл прекрасно контактирует с множеством плагинов и скриптов. Последние имеют разновидность, которая называется букмарклет. Букмарклеты могут работать как закладки в браузере наравне с плагинами.
Использование плагинов и букмарклетов позволяет в пару кликов проверить индексацию сайта и другие его характеристики.
Среди плагинов Google, применяемых SEO-специалистами для анализа страниц, отметим SimilarWeb, MozBar и RDS bar. Ниже приведён пример работы плагина RDS bar в Гугле и Яндексе. Можно посмотреть степень индексации станиц и другую информацию.
Букмарклеты для проверки индексации работают в аналогичном стиле. Есть такие скрипты, как Google Index и Google URL Index. Первый позволяет проверить индексацию через оператор site, а второй – через оператор info.
Специальные сервисы-анализаторы облегчают работу СЕО-специалиста. Их существует превеликое множество. Среди таковых особенно отметим saitreport.ru, Netpeak Spider и Netpeak Checker, SEO-reports, Rush Analytics, Топвизор и FastTrust.
Обобщённо говоря, эти средства позволяют проверить индексацию сайта, провести диагностику возможных проблем. Среди прочих функций – скан наличия страниц в каталогах поисковика, проверка ключевых слов, информация о динамике ссылок, общий анализ позиций сайта.
Не всегда уровень индексации сайта может нас устраивать. Причины низких результатов сканирования страниц поисковым роботом могут заключаться в следующем:
Чтобы достичь идеального уровня индексации сайта, требуется совпадение ряда условий. Это непростая задача, учитывая высокую динамику развития алгоритмов поисковых систем, что не отменяет важности контроля. На примере поисковой системы Гугл мы выяснили, что проверить индексацию можно с помощью: Google Webmaster, операторов поиска Гугл, плагинов и букмарклетов для Google и Яндекс и сервисов проверки индексации.
Оставьте ваш e-mail, чтобы получать подборки наших новостей.
