Noindex

Определение

Noindex представляет собой тег, предназначенный для управления индексацией контента со стороны поисковых систем. Так, если в статье выделить определенный фрагмент и заключить его в тег noindex, то поисковику будет предупрежден об отсутствии необходимости в индексации данного фрагмента.

Задачи тега

Атрибут был впервые предложен веб-мастерами из корпорации Яндекс и позволил специалистам вычленять фрагменты текстовых документов, которые не являются полезными или интересными, поэтому не должны учитываться при индексации страницы в целом.

Также атрибут имеет и другую главную функцию. Так, noindex, способен блокировать индексацию определенных страниц веб-ресурса, предназначенных для размещения контента от пользователей. Это всем известные страницы с комментариями, сообщениями, блогами, отзывами и т. д. В этом случае тег исключает распространение нежелательного контента и позволяет применять умеренное модерирование сообщений пользователей.

Тег учитывается исключительно поисковым ботом Яндекса. Система Гугл игнорирует noindex и полностью индексирует тестовый контент страницы. Для того чтобы блокировка индексации проходила по всем поисковым системам, необходимо использовать специальных метатег для отдельных страниц или веб-ресурса в целом. Это можно сделать с помощью рабочего файла robots.txt. Способ имеет очевидный недостаток: вы сможете запретить индексацию только всей страницы и информации на ней, но не отдельной части текста.

Достоинства тега noindex

Использование атрибута дает следующие возможности веб-специалисту.

1. Скрывать второстепенную (неактуальную, неинтересную, неважную) информацию с целью повышения релевантности индексируемой страницы. Это достигается за счет повышения плотности ключевиков в полотне доступного для индексации текста.
2. Прятать контент сквозных блоков в том случае, когда одинаковый текст публикуется сразу на нескольких страницах, что может привести к пессимизации ресурса в поисковой выборке Яндекса.
3. Скрывать нежелательную или конфиденциальную текстовую информацию, которая просочилась в сниппет.

Принцип работы тега noindex

Несмотря на то, что атрибут был разработан специалистами такой авторитетной поисковой системы как Яндекс, его применение зачастую считается методом серой оптимизации сайта. Причиной этому послужил тот факт, что веб-специалисты не всегда используют тег по прямому назначению. Например, от поисковика прячутся неуникальные фрагменты текста или информация без ключевиков, которая тем не менее будет прочитана посетителями ресурса. При этом боту «подсовывается» полотно, перенасыщенное ключевыми словами, которое тяжело воспринимается реальным читателем.

Яндекс и сам борется с подобными методами оптимизации: он подвергает анализу фрагмент, заключенный в тег noindex, индексирует его, а затем производит фильтрацию скрытого контента. В результате анализа страницы робот может наложить фильтры и санкции на ресурс, если примет решение, что владелец использовал неправомерные методы влияния на результаты поиска.