X, наконец, Twitter.com, теперь запрещает Bing Search, в частности Bingbot, сканировать и получать доступ к контенту, опубликованному на Twitter.com, на Bingbot для изучения содержимого его платформы.
Вот скриншот его файл robots.txt:
Кажется, это впервые заметил Майк Гинли, который разместил это на Икс«Блокировка Bing в Твиттере — интересный шаг…» Гленн Гейб покопался в хронике, отметив, что это было довольно недавнее изменение со стороны Bing:
По состоянию на 1 июля сканирование Bing не было заблокировано. 1 сентября были заблокированы ВСЕ боты, конкретно не вошедшие в файл. А с 17 октября Bing был специально заблокирован. Запрос на сайт выявляет некоторые очень странные вещи для Twitter в Bing по понятным причинам. https://t.co/hWjKgxM9q7
–Гленн Гейб (@glenngabe) 18 октября 2023 г.
Фактически, заказ сайта на Bing отображается только 180 000 URL-адресов Twitter:
Но с Google заказ сайта отображает 422 миллиона URL-адресов.
В июле прошлого года Twitter заблокировал Google, из-за чего видимость Twitter в поиске Google значительно упала. Несколько дней спустя Twitter отменил это изменение.
Я думаю, Twitter/X не хочет трафика из поиска Bing? Я имею в виду, если им нужна более эффективная индексация, просто используйте IndexNow?
Обсуждение на форуме по адресу Икс.