Пятница, 24 ноября 2023 г.
Инструмент ограничения скорости сканирования в Search Console прекращает поддержку 8 января 2024 г. Этот инструмент доступен уже более десяти лет, но с улучшениями, которые мы внесли в нашу логику сканирования и другие инструменты, доступные издателям, его полезность сошла на нет. .
Робот Googlebot реагирует на то, как сайт — или, точнее, сервер, обслуживающий сайт, — отвечает на HTTP-запросы робота Googlebot. Например, если сервер постоянно возвращает HTTP
500
коды статуса для ряда URL-адресов, робот Google автоматически и почти сразу же замедлит сканирование. Аналогичным образом робот Googlebot автоматически замедляется, если время ответа на запросы значительно увеличивается. Если вы столкнулись с необычно интенсивным сканированием, с которым ваш сайт не может справиться самостоятельно, обратитесь к этой справочной статье.
Напротив, инструмент ограничения скорости имел гораздо более медленный эффект; на самом деле, возможно, потребовалось больше суток, чтобы новые ограничения на сканирование были применены. К счастью, владельцам сайтов редко приходилось прибегать к использованию этого инструмента, а те, кому это приходилось, во многих случаях устанавливали скорость сканирования на минимум. Поскольку инструмент ограничения сканирования устарел, мы также установили более низкую минимальную скорость сканирования, сравнимую со старыми ограничениями скорости сканирования. Это означает, что мы эффективно продолжаем соблюдать настройки, которые некоторые владельцы сайтов установили в прошлом, если интерес к ним в поиске низкий, и наши сканеры не тратят впустую пропускную способность сайта.
В связи с развитием автоматизированной обработки скорости сканирования и в духе упрощения работы для пользователей мы прекращаем поддержку этого инструмента в Search Console. Мы сохраняем форму отчета робота Googlebot для сообщения о необычных действиях робота Googlebot и в экстренных случаях, но имейте в виду, что самый быстрый способ снизить скорость сканирования — это дать указание роботу Googlebot посредством ответов сервера, как подробно описано в нашей документации.
Если у вас есть вопросы или комментарии, пишите в нашу
Центральное сообщество Google Поиска.
Авторы: Гэри Иллиес и Нир Калуш