В недавнем посте на LinkedIn аналитик Google Гэри Иллис привлек внимание к двум проблемам, с которыми сталкиваются веб-сканеры: soft 404 и другие «криптографические» ошибки.

Эти, казалось бы, безобидные ошибки могут негативно повлиять на усилия по SEO.

Понимание мягких ошибок 404

Мягкие ошибки 404 возникают, когда веб-сервер возвращает стандартный код состояния HTTP «200 OK» для страниц, которые не существуют или содержат сообщения об ошибках. Это вводит в заблуждение веб-сканеров, заставляя их тратить ресурсы на несуществующий или бесполезный контент.

Иллис сравнил этот опыт с посещением кофейни, где все позиции недоступны, несмотря на то, что указаны в меню. Хотя такой сценарий может быть неприятным для клиентов-людей, он представляет собой более серьезную проблему для веб-сканеров.

Эйс Иллиес объясняет:

«Пауки используют коды статуса, чтобы интерпретировать, была ли выборка успешной, даже если содержимое страницы по сути представляет собой просто сообщение об ошибке. Они могут с радостью возвращаться к той же странице снова и снова, тратя ваши ресурсы, а если таких страниц много, то и ресурсы растут экспоненциально».

Скрытые издержки незначительных ошибок

Последствия мягких ошибок 404 выходят за рамки неэффективного использования ресурсов поискового робота.

По словам Иллеса, такие страницы вряд ли появятся в результатах поиска, поскольку они отфильтровываются во время индексации.

Для решения этой проблемы Иллис советует предоставлять соответствующий код статуса HTTP, когда сервер или клиент сталкивается с ошибкой.

Это позволяет поисковым роботам понимать ситуацию и более эффективно распределять свои ресурсы.

Иллис также предостерег от ограничения скорости сканирования с помощью сообщений типа «СЛИШКОМ МНОГО ЗАПРОСОВ, ЗАМЕДЛЯЮТ», поскольку сканеры не могут интерпретировать такие текстовые инструкции.

Почему SEJ заботится

Мягкие ошибки 404 могут повлиять на возможность сканирования и индексации веб-сайта.

Решая эти проблемы, сканеры могут сосредоточиться на извлечении и индексировании страниц с ценным контентом, потенциально улучшая видимость сайта в результатах поиска.

Устранение программных ошибок 404 также может привести к более эффективному использованию ресурсов сервера, поскольку сканеры не будут тратить пропускную способность на повторное посещение страниц с ошибками.

Как это может вам помочь

Чтобы выявить и устранить программные ошибки 404 на вашем веб-сайте, выполните следующие действия:

1. Регулярно проверяйте отчеты и журналы сканирования вашего веб-сайта, чтобы выявлять страницы, возвращающие коды статуса HTTP 200, несмотря на наличие сообщений об ошибках.
2. Внедрите правильную обработку ошибок на своем сервере, чтобы гарантировать, что страницы ошибок обслуживаются с соответствующими кодами состояния HTTP (например, 404 — не найдено, 410 — удалено навсегда).
3. Используйте такие инструменты, как Google Search Console, для мониторинга охвата вашего сайта и выявления страниц, помеченных как мягкие ошибки 404.

Проактивное устранение ошибок 404 может улучшить индексацию, сканирование и SEO вашего сайта.

---

Главное изображение: Джулия Тим/Shutterstock