Джон Мюллер из Google ответил на вопрос об удалении взломанных URL-адресов, которые отображаются в индексе. Он объяснил, как убрать сайты из результатов поиска, а затем обсудил нюансы решения этой конкретной ситуации.
Удаление взломанных страниц из результатов поиска Google
Человек, задавший вопрос, стал жертвой японской хакерской атаки, названной так потому, что злоумышленники создали сотни или даже тысячи мошеннических веб-страниц на японском языке. Человек справился с проблемой и удалил зараженные спамом веб-страницы, оставив на них только 404 страницы, на которые все еще ссылаются в результатах поиска Google.
Теперь они хотят удалить их из поискового индекса Google, чтобы сайт больше не ассоциировался с этими страницами.
Они спросил:
«Недавно мой сайт подвергся японской атаке. Однако я перенес этот сайт на нового хостинг-провайдера и удалил оттуда все данные.
Однако факт заключается в том, что многие японские URL-адреса были проиндексированы.
Так как же мне деиндексировать эти тысячи URL-адресов с моего сайта?»
Вопрос отражает распространенную проблему, возникшую после японской хакерской атаки, когда взломанные страницы упорно остаются в индексе еще долгое время после того, как страницы были удалены. Это показывает, что восстановление сайта не завершено после удаления вредоносного контента; Поисковому индексу Google необходимо очистить страницы, а это может занять удручающе много времени.
Как удалить страницы японских хакерских атак из Google
Джон Мюллер из Google рекомендовал использовать инструмент удаления URL-адресов, который можно найти в Search Console. Вопреки смыслу, заложенному в названии инструмента, он не удаляет URL-адрес из поискового индекса; он просто удаляет его из результатов поиска Google быстрее, если контент уже был удален с сайта или заблокирован для сканера Google. В обычных обстоятельствах Google удалит страницу из результатов поиска после того, как страница будет просканирована и отмечена как заблокированная или исчезнувшая (ответ на ошибку 404).
Три обязательных условия для инструмента удаления URL-адресов
- Страница удаляется и возвращает код ответа сервера 404 или 410.
- URL-адрес заблокирован от индексации метатегом robots:
- Сканирование URL-адреса запрещено файлом robots.txt.
Мюллер из Google ответил:
«Вы можете использовать инструмент удаления URL-адресов в консоли поиска для отдельных URL-адресов (также, если все URL-адреса начинаются с одного и того же слова). Я бы использовал его для всех, которые особенно заметны (проверьте отчет об эффективности, 24 часа).
Это не удаляет их из индекса, но скрывает в течение дня. Если страницы недействительны / 404 сейчас, они также со временем исчезнут, но инструмент удаления означает, что вы можете «немедленно» запретить их видимость. (Перенаправление или 404 — это нормально, технически 404 — это правильный код ответа)»
Мюллер пояснил, что инструмент удаления URL-адресов не удаляет URL-адреса из индекса Google, а вместо этого скрывает их из результатов поиска, быстрее, чем при обычном повторном сканировании. Его объяснение является напоминанием о том, что этот инструмент имеет временный эффект видимости при поиске и не является способом окончательного удаления URL-адреса из самого индекса Google. Фактическое удаление из поискового индекса происходит после того, как Google проверит, что страница действительно исчезла или заблокирована для сканирования или индексирования.
Рекомендованное изображение: Shutterstock/Asier Romero
