Страницы, закрытые от индексирования

Некоторые страницы Вашего сайта могут быть закрыты от индексирования. Рекомендуется перепроверить файл robots.txt и убедиться в том, что страницы с полезным содержимым индексируются и не запрещены по ошибке.

Убедитесь, что ни один из важных разделов сайта не закрыт от индексирования. Для этого проверьте правила Disallow в Вашем файле robots.txt.

Есть несколько способов запретить поисковым роботам индексировать страницу:
  • с помощью robots.txt
  • с помощью тега Noindex X-Robots
  • с помощью мета-тега Noindex. 
Каждый из этих пунктов — строка HTML кода, которая говорит, как поисковые роботы должны сканировать конкретные страницы на сайте. В частности, такой тег говорит роботу, что страница запрещена от индексирования, перехода по её ссылкам и/или архивирования содержимого. Поэтому убедитесь, что страницы с уникальным и полезным содержимым доступны для индексирования.

Возврат к списку