Google выпустил новый поисковый робот Googlebot под названием Google-InspectionTool. Этот новый сканер Google будет определять активность сканирования для сканера, используемого инструментами тестирования Google Search, такими как тест расширенных результатов и инструмент проверки URL-адресов Google Search Console.

Google-InspectionTool. Google опубликовал подробности об этом новом сканере в своем справочном документе. здесь. В нем говорится: «Google-InspectionTool — это сканер, используемый инструментами тестирования поиска, такими как Rich Result Test и проверка URL-адресов в Search Console. Помимо пользовательского агента и токена пользовательского агента, он имитирует Googlebot».

Вот скриншот этой документации:

Пользовательский агент. Токен пользовательского агента для его активности сканирования может быть либо классическим роботом Google, либо новым Google-InspectionTool. Google также перечислил полные строки пользовательского агента, которые различаются для сканирования мобильных и настольных компьютеров:

• Мобильный
  Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Google-InspectionTool/1.0)
• Рабочий стол
  Mozilla/5.0 (compatible; Google-InspectionTool/1.0)

Почему мы заботимся. Если вы увлекаетесь поисковым роботом и анализируете активность сканирования и активность ботов в своих файлах журналов, вы можете увидеть появление Google-InspectionTool. Это особенно важно, если вы используете Rich Result Test и проверку URL в Google Search Console.

Если вы видите проблемы с работой этих инструментов, возможно, вы блокируете доступ пользовательского агента Google-InspectionTool к вашему сайту. Поэтому обязательно разрешите Google-InspectionTool сканировать ваш сайт, если у вас есть строгие правила.