Meta Robots Tag

Главная Словарь Meta Robots Tag

Разберём один из ключевых технических инструментов SEO — Meta Robots Tag. Этот тег помогает управлять тем, как поисковые системы индексируют и отображают страницы сайта, и используется веб-мастерами для тонкой настройки поведения роботов.

Что такое Meta Robots Tag

Meta Robots Tag — это HTML-тег, который размещается в разделе <head> страницы и даёт поисковым роботам инструкции:

можно ли индексировать страницу,
нужно ли переходить по ссылкам на ней,
следует ли показывать страницу в результатах поиска.

Этот тег — инструмент внутреннего SEO-контроля, позволяющий управлять поведением поисковиков без изменения файла robots.txt.

Синтаксис

Пример стандартного мета-тега robots:

Этот вариант сообщает поисковику:

«Можно индексировать страницу и переходить по всем ссылкам, которые на ней размещены.»

Основные директивы Meta Robots

Директива	Значение	Что делает
index	Индексировать	Разрешает поисковику добавлять страницу в индекс.
noindex	Не индексировать	Запрещает добавление страницы в индекс.
follow	Следовать по ссылкам	Разрешает переход по ссылкам и передачу веса (PageRank).
nofollow	Не следовать по ссылкам	Запрещает переход по ссылкам и не передаёт ссылочный вес.
noarchive	Без копии	Запрещает показывать кешированную версию страницы в поиске.
nosnippet	Без описания	Не позволяет показывать сниппет (описание страницы) в выдаче.
noimageindex	Не индексировать изображения	Запрещает индексировать картинки со страницы.
notranslate	Без перевода	Запрещает поисковику предлагать перевод страницы.
max-snippet: число	Ограничивает длину сниппета	Контролирует количество символов в описании.
max-image-preview: none / standard / large	Управляет отображением изображений в превью	Позволяет задать размер изображения в выдаче.
max-video-preview: число	Устанавливает длину видео-превью	Контролирует, сколько секунд видео можно показать в результатах поиска.

Примеры использования

1. Разрешить индексировать и переходить по ссылкам

Используется по умолчанию для открытых страниц — статей, карточек товаров, блогов.

2. Запретить индексацию, но разрешить переход по ссылкам

Подходит для страниц, которые не должны попадать в поиск (например, корзина, личный кабинет), но с которых идут важные внутренние ссылки.

3. Запретить индексацию и переход по ссылкам

Полностью закрывает страницу для роботов. Применяется редко — например, для служебных или тестовых страниц.

4. Только запрет на показ кеша

Полезно, если на сайте часто обновляется информация (например, цены) и важно, чтобы пользователи не видели устаревшую версию страницы.

5. Для отдельных поисковых систем

Инструкции можно задать конкретному поисковику:

Это позволяет управлять поведением разных поисковых систем независимо.

Когда использовать Meta Robots Tag

Использовать стоит, если нужно:

скрыть неинформативные страницы (авторизация, корзина, фильтры);
избежать дублирования контента;
не передавать ссылочный вес через определённые ссылки;
защитить контент от копирования через кеш.

Не использовать:

на страницах, которые должны участвовать в ранжировании;
вместо корректной настройки txt — эти инструменты работают совместно, а не заменяют друг друга.

Разница между Meta Robots и Robots.txt

Критерий	Meta Robots Tag	Robots.txt
Место настройки	На уровне конкретной страницы	На уровне всего сайта
Контроль индексации	Управляет индексацией содержимого	Управляет доступом к файлам
Точность	Можно задавать индивидуальные инструкции	Глобальные ограничения
Используется для	Страниц HTML	Всех типов файлов (в том числе изображений, PDF, CSS и т.д.)

Идеальный вариант — использовать оба инструмента:

txt регулирует доступ,
meta robots управляет индексированием конкретных страниц.

Частые ошибки

Противоречивые директивы. Например, index, nofollow может привести к некорректной обработке.
Дублирование тегов. Если указано несколько тегов robots, поисковик может выбрать только первый.
Использование noindex на важных страницах. Это приведёт к их выпадению из поиска.
Игнорирование кэширования. Без noarchive старые версии страниц могут отображаться в выдаче.

Итог

Meta Robots Tag — это мощный инструмент SEO, который помогает управлять тем, как поисковые системы индексируют, отображают и обрабатывают страницы сайта. При правильной настройке он позволяет: