Гэри Иллис из Google ответил на вопрос о функциях, не связанных с поиском, которые поддерживает поисковый робот GoogleOther, а затем предупредил о последствиях блокировки GoogleOther.
Содержание
Что такое GoogleOther?
GoogleOther — это универсальный краулер, созданный Google для различных целей, которые выходят за рамки ботов, специализирующихся на поиске, рекламе, видео, изображениях, новостях, настольных компьютерах и мобильных устройствах. Он может использоваться внутренними командами Google для исследований и разработок в отношении различных продуктов.
Официальное описание GoogleOther:
«GoogleOther — это универсальный краулер, который может использоваться различными командами разработчиков для извлечения общедоступного контента с сайтов. Например, его можно использовать для одноразовых сканирований для внутренних исследований и разработок».
Удивительно, но на самом деле существует три вида поисковых роботов GoogleOther.
Три вида GoogleДругие поисковые роботы
- GoogleДругое
Универсальный сканер для публичных URL-адресов - GoogleДругое-Изображение
Оптимизировано для сканирования URL-адресов общедоступных изображений - GoogleДругое-Видео
Оптимизировано для сканирования URL-адресов общедоступных видео
Все три краулера GoogleOther могут использоваться для целей исследования и разработки. Это только одна из целей, для которых Google публично признает, что все три версии GoogleOther могут использоваться.
Какие функции, не связанные с поиском, поддерживает GoogleOther?
Google не говорит, какие именно функции, не связанные с поиском, поддерживает GoogleOther, вероятно, потому, что он на самом деле не «поддерживает» определенную функцию. Он существует для сканирования исследований и разработок, которые могут быть в поддержку нового продукта или улучшения текущего продукта, это очень открытая и общая цель.
Вот вопрос, который задал Гэри:
«Какие функции, не связанные с поиском, поддерживает сканирование GoogleOther?»
Гари Иллис ответил:
«Это очень актуальный вопрос, и я думаю, что это очень хороший вопрос. Кроме того, что есть в публике, мне больше нечего сказать.
GoogleOther — это универсальный краулер, который может использоваться различными командами по продуктам для извлечения общедоступного контента с сайтов. Например, его можно использовать для одноразовых краулеров для внутренних исследований и разработок.
Традиционно для этих целей использовался Googlebot, но это делает все неясным и менее прозрачным, поэтому мы запустили GoogleOther, чтобы у вас был лучший контроль над тем, на какие цели сканируется ваш сайт.
При этом GoogleOther не привязан к какому-то одному продукту, поэтому отказ от сканирования GoogleOther может повлиять на широкий спектр вещей во вселенной Google; увы, не на Поиск, поиск — это всего лишь Googlebot».
Это может повлиять на широкий спектр вещей
Гари ясно дал понять, что блокировка GoogleOther не повлияет на Google Search, поскольку Googlebot — это краулер, используемый для индексации контента. Так что если владелец сайта хочет заблокировать любую из трех версий GoogleOther, то это должно быть нормально, без негативного влияния на рейтинг поиска.
Но Гэри также предупредил о результате блокировки GoogleOther, заявив, что это повлияет на другие продукты и сервисы Google. Он не указал, на какие другие продукты это может повлиять, и не стал подробно останавливаться на плюсах или минусах блокировки GoogleOther.
Плюсы и минусы блокировки GoogleДругое
На вопрос, стоит ли блокировать GoogleOther, не всегда можно дать однозначный ответ. Есть несколько соображений относительно того, имеет ли это смысл.
Плюсы
Включение в исследование будущего продукта Google, связанного с поиском (карты, покупки, изображения, новая функция поиска), может быть полезным. Может быть полезным включить сайт в такое исследование, поскольку он может использоваться для тестирования чего-то хорошего для сайта и быть одним из немногих сайтов, выбранных для тестирования функции, которая может увеличить доход сайта.
Еще одно соображение заключается в том, что блокировка GoogleOther для экономии ресурсов сервера не обязательно является веской причиной, поскольку GoogleOther, по-видимому, не сканирует так часто, чтобы это оказывало заметное влияние.
Если блокировка Google от использования контента сайта для ИИ вызывает беспокойство, то блокировка GoogleOther вообще не окажет на это никакого влияния. GoogleOther не имеет никакого отношения к сканированию для приложений Google Gemini или Vertex AI, включая любые будущие продукты, которые будут использоваться для обучения связанных языковых моделей. Бот для этого конкретного варианта использования — Google-Extended.
Минусы
С другой стороны, разрешение GoogleOther может оказаться бесполезным, если он используется для тестирования чего-то, связанного с борьбой со спамом, и сайту приходится что-то скрывать.
Владелец сайта может не захотеть участвовать, если GoogleOther приползет для проведения маркетинговых исследований или обучения моделей машинного обучения (для внутренних целей), которые не связаны с общедоступными продуктами, такими как Gemini и Vertex.
Позволить GoogleOther сканировать сайт в неизвестных целях — это все равно, что предоставить Google карт-бланш на использование данных вашего сайта любыми способами, которые они посчитают нужными, за исключением обучения публичных LLM или целей, связанных с именованными ботами, такими как GoogleBot.
Еда на вынос
Стоит ли блокировать GoogleOther? Это как подбросить монетку. Возможные потенциальные выгоды есть, но в целом недостаточно информации для принятия обоснованного решения.
Послушайте подкаст Google SEO Office Hours на отметке 1:30 минуты:
Главное изображение от Shutterstock/Cast Of Thousands
