Вкладка «Файл robots.txt»

На этой вкладке представлен анализ файла robots.txt, который содержит инструкции для поисковых систем. В левой части расположен список критериев, по которым проверяется файл и результат проверки. Под списком критериев присутствует подсказка по каждому из них. Достаточно выделить любой критерий в таблице, и в нижней части будет обновлён текст подсказки.

В правой части расположены две вкладки, на первой показано содержимое файла robots.txt, на второй список страниц, запрещённых для индексации поисковыми системами согласно инструкций robots.txt.

Внимание!!! Убедитесь, что на этой вкладке нет страниц, которые должны быть проиндексированы поисковыми системами. Если таковые есть – исправьте файл robots.txt.