Google анонсировал новый отчет robots.txt в Google Search Console и в то же время заявил, что прекратит работу старого инструмента тестирования robots.txt. Новый инструмент показывает, какие файлы robots.txt Google нашел для 20 лучших хостов вашего сайта, время их последнего сканирования, а также любые обнаруженные предупреждения или ошибки.
Google также сообщил о Икс«Мы также предоставляем соответствующую информацию из отчета об индексировании страниц. В рамках этого обновления мы прекращаем работу тестера robots.txt».
Чтобы получить к этому доступ, перейдите по ссылке настроек вашего профиля Search Console или кликните сюда. Вот как это выглядит:
Вот как выглядит отчет по этому сайту, да, у меня критическая ошибка. Вот эти подробности и обратите внимание: вы можете запросить повторное сканирование файла robots.txt:
Этот справочный документ об этом отчете рассказывается гораздо больше.
Некоторые недовольны тем, что инструмента тестирования robots.txt больше нет, но у Bing он все еще есть:
Хорошие альтернативы устаревшему инструменту Google для проверки вашего файла robots.txt:
• Меркл: https://t.co/33yMW9IlPB
• Утром: https://t.co/jYAGuHN2q5
• Кричащая лягушка (ползком): https://t.co/zsr2KMiNmC— Сайрус SEO (@CyrusShepard) 15 ноября 2023 г.
Мне нравятся новые отчеты robots.txt (кстати, они есть в настройках), но удалить тестер robots.txt? Мне нравится этот инструмент, и он может быть очень полезным. Есть и другие инструменты, которые делают аналогичные вещи, в том числе инструмент от Bing, но мне бы хотелось, чтобы они остались в GSC. 🙂 https://t.co/hMIJQjfpQV
— Гленн Гейб (@glenngabe) 15 ноября 2023 г.
Обсуждение на форуме Икс.
