Новая инициатива CloudFlare «Pay Per Crawl» вызвала дебаты среди профессионалов SEO и цифровых маркетологов.
Компания имеет введено Система блокировки AI по умолчанию наряду с новыми параметрами монетизации для издателей.
Это позволяет издателям взимать с компаний по ИИ за доступ, что может повлиять на то, как веб -контент потребляется и ценится в эпоху генеративного поиска.
Содержание
Новый дефолт Cloudflare: заблокировать Clawlers AI
Система, которая сейчас находится в частной бета -версии, блокирует известные AI -сканеры по умолчанию для новых облачных доменов CloudFlare.
Издатели могут выбрать одну из трех настроек доступа для каждого хрупка:
- Позволять — предоставить неограниченный доступ
- Заряжать -Требовать оплаты по настроенной цене по всей домену
- Блокировать — полностью отрицать доступ
Сканеры, которые пытаются получить доступ к заблокированному контенту, получат 402 Payment Required ответ. Издатели устанавливают квартиру, по всей стране за запрос и CloudFlare обрабатывают выставление счетов и распределение доходов.
Cloudflare написал:
«Представьте, что вы спросите о вашей любимой глубокой исследовательской программе, чтобы помочь вам синтезировать новейшие исследования рака или законное краткое изложение или просто помочь вам найти лучший ресторан в Сохо, а затем предоставить этому агенту бюджет, чтобы потратить на получение лучшего и наиболее актуального контента.
Технические детали и принятие издателей
Система напрямую интегрируется с инструментами управления ботами CloudFlare и работает вместе с существующими правилами WAF и robots.txt файлы Аутентификация обрабатывается с использованием пар клавиш ED25519 и подписи HTTP сообщений, чтобы предотвратить подделку.
Cloudflare говорит, что ранние пользователи включают крупных издателей, таких как Condé Nast, Time, Atlantic, AP, BuzzFeed, Reddit, Pinterest, Quora и другие.
В то время как текущая установка поддерживает только плоские цены, компания планирует изучить динамические и гранулированные модели ценообразования в будущих итерациях.
SEO сообщество разделяет проблемы
В то время как новые элементы управления Cloudflare могут быть изменены вручную, несколько экспертов SEO обеспокоены влиянием отказа от системы, а не на участие.
«Это не закончится хорошо», — написал Дуэйн ФоррестерВице-президент по информации о промышленности в Yext, предупреждая, что предприятия могут изо всех сил пытаться появиться в ответах на основе AI, не осознавая, что доступ к Crawler блокируется, если плата не выплачена.
Лили РэйВице -президент по стратегии и исследованиям SEO в Amsive Digital отметил, что изменения, вероятно, вызовут неотложные беседы с клиентами, особенно те, которые не знают, что их сайты теперь могут быть невидимыми для разбрызгивателей ИИ по умолчанию.
Райан ДжонсСтарший вице -президент SEO в Razorfish выразил, что большинство его клиентских сайтов действительно хотят, чтобы AI Clawlers имели доступ к своему контенту по причинам видимости.
Некоторые говорят, что это необходимый сброс
Некоторые в сообществе приветствуют этот шаг как давний перебалансирование экономики контента.
«Требуется сила, чтобы наклонить баланс обратно туда, где он когда -то был», — сказал Педро ДиасТехнический консультант SEO и бывший член команды по качеству поиска Google. Он предполагает, что нынешние динамические благоприятные компании по искусственному искусству за счет издателей.
Ilya GrigorikВыдающийся инженер и технический консультант в Shopify, похвалил использование криптографической аутентификации, заявив, что она «очень необходима», учитывая, как трудно различать законные и злонамеренные боты.
В соответствии с новой системой, Crawlers должны аутентифицировать с использованием криптографии открытого ключа и объявить о намерениях оплаты через пользовательские заголовки HTTP.
Глядя в будущее
Система Cloudflare оплаты за роли формализует новый уровень переговоров о том, кто получает доступ к веб-контенту, и при какой цене.
Для профессионалов SEO это добавляет сложности: видимость теперь может зависеть не только от ранжирования, но и от настроек доступа к хрупке, политики платежей и аутентификации бота.
В то время как некоторые видят в этом как расширяющие возможности издателей, другие предупреждают, что она может фрагментировать открытую сеть, где доступ к контенту варьируется в зависимости от инфраструктуры и платных произведений.
Если генеративный ИИ становится основной частью того, как люди ищут, и трубки, которые кормят, которые сейчас являются платными дорогами, веб -сайты должны будут управлять видимостью в растущей лоскутной обработке систем, политик и финансовых моделей.
Показанное изображение: Роман Самборкии/Shutterstock
