Обновлено: 5 марта 2023 г.

Узнайте, как провести аудит XML-карты сайта за 5 простых шагов.

В этой статье я собираюсь показать вам, как проводить аудит XML-карты сайта в рамках SEO-аудита, чтобы убедиться, что XML-карта сайта содержит все правильные URL-адреса.

Карта сайта XML — это, по сути, дорожная карта, которая помогает поисковым системам сканировать и индексировать все важные страницы веб-сайта. Но когда это действительно важно? И когда можно пропустить?

Я также расскажу об этом и помогу вам определить, когда вы должны поставить карту сайта на первое место в списке приоритетов.

Итак, давайте углубимся в то, как проводить аудит XML-карты сайта на профессиональном уровне!

Как провести аудит XML-карты сайта: суть

Если вы не хотите читать всю статью, вот суть аудита XML-карт сайта:

• XML-карты сайта важны только для огромных сайтов. Небольшие сайты могут обойтись без карты сайта в формате XML.
• Всегда проверяйте карты сайта отчет в Google Search Console (Индексация > карты сайта) при аудите сайта.
• Сканирование карт сайта XML с помощью поискового робота, такого как JetOctopus, Кричащая лягушкаили Sitebulb чтобы быстро увидеть, содержат ли XML-карты сайта URL-адреса, которые они не должны содержать.
• Карты сайта XML должны содержать только канонические и индексируемые URL-адреса, которые возвращают код состояния 200 (ОК).
• Неправильные URL-адреса в XML-карте сайта большого веб-сайта могут негативно повлиять на краулинговый бюджет сайта.

Как провести аудит XML-карты сайта: подробности

А вот более подробная версия того, как проводить аудит XML-карты сайта в рамках процесса SEO-аудита.

Имейте в виду, что это не полное руководство по картам сайта XML со всей информацией и возможными вариантами использования. Если вы заинтересованы в более подробном изучении XML-карт сайта, прочтите Документация Google по картам сайта.

Какие URL-адреса должна содержать XML-карта сайта

URL-адреса, которые должна содержать XML-карта сайта, важны для поисковых систем при сканировании и индексировании.

Сюда входят страницы, которые вы хотите ранжировать на страницах результатов поисковых систем (SERP), а также страницы, которые поисковым системам трудно найти, например страницы с динамическим содержанием или страницы, на которые нет ссылок с других страниц вашего веб-сайта.

Не включайте страницы, такие как страницы с дублированным содержимым, страницы с разбивкой на страницы, страницы в стадии разработки, перенаправленные страницы, канонизированные страницы или практически любые страницы, которые не являются канонические версии заданного URL.

Шаг 1. Оцените, является ли XML-карта сайта приоритетом для веб-сайта.

Карта сайта может понадобиться, если у вас есть большой веб-сайт, новый веб-сайт с небольшим количеством внешних ссылок или веб-сайт с большим количеством мультимедийного контента или он отображается в Новостях Google.

С другой стороны, карта сайта может не понадобиться для небольшого веб-сайта с менее чем 500 страницами, внутреннего сайта со всесторонними ссылками или сайта с небольшим количеством медиафайлов или новостных периодов, которые вы хотите отображать в результатах поиска.

Цель карты сайта — помочь Google понять структуру и содержание вашего веб-сайта и убедиться, что все важные страницы просканированы и проиндексированы.

Я думаю, что Google — источник — отлично объясняет, когда XML-карта сайта может и не быть приоритетом.

Шаг 2. Найдите XML-карту сайта веб-сайта.

Если вы ищете XML-карту сайта веб-сайта, самый быстрый и простой способ найти ее — вручную проверить общие местоположения:

• Наиболее распространенные места для файлов Sitemap: /sitemap.xml, /sitemap_index.xml (который является индексом карты сайта) и /карта сайта/ (который часто перенаправляет на sitemap.xml).
• Другие возможные имена файлов для карты сайта или индекса карты сайта включают /sitemap.php, /sitemap.txtи /sitemap.xml.gz (используя сжатие gzip).
• Еще один способ найти карту сайта — проверить, указана ли она в robots.txt.
  • Чтобы просмотреть файл robots.txt любого веб-сайта, просто добавьте /роботы.txt к домену. Последняя строка файла будет указывать расположение карты сайта.
  • Имейте в виду, что если сайт имеет нестандартное расположение карты сайта, в файле robots.txt это должно быть указано.

У меня есть вся статья о том, как найти карту сайта веб-сайта, если вы хотите погрузиться глубже.

Шаг 3. Проверьте XML-карту сайта в GSC.

Важным шагом в аудите карты сайта XML является проверка карты сайта отчет в Google Search Console.

Этот отчет содержит ценную информацию о вашей карте сайта, такую ​​как:

• была ли отправлена ​​в Google карта сайта в формате XML или индекс карт сайта в формате XML,
• есть ли проблемы с получением карт сайта в формате XML,
• и есть ли какие-либо проблемы с индексацией отправленных URL-адресов.

Просматривая этот отчет, вы можете получить четкое представление о том, насколько хорошо работает XML-карта сайта, который вы проверяете, и есть ли какие-либо проблемы, которые необходимо исправить.

Этот шаг необходим для обеспечения эффективного сканирования и индексирования важных страниц сайта, который вы проверяете.

Итак, не забудьте проверить карты сайта отчет в Google Search Console в рамках аудита вашей XML-карты сайта!

Прочтите мою статью о том, как добавить XML-карту сайта в Google Search Console.

Шаг 4. Просканируйте XML-карту сайта

Еще одним шагом в аудите XML-карты сайта является ее сканирование с помощью специального инструмента для сканирования, такого как JetOctopus, Кричащая лягушкаили Sitebulb. Есть два способа приблизиться к этому шагу.

Способ 1. Просканируйте как веб-сайт, так и XML-карту сайта.

Первый метод заключается в сканировании всего веб-сайта вместе с картами сайта XML, чтобы сканер мог проверить, какие URL-адреса веб-сайта указаны в карте сайта XML, есть ли потерянные URL-адреса, верны ли URL-адреса, указанные в карте сайта XML, и т. д. .

Каждый из вышеупомянутых поисковых роботов позволяет настроить их для сканирования как карты сайта, так и веб-сайта перед началом сканирования.

Вот как настроить Screaming Frog для сканирования сайта и карты сайта:

Здесь карты сайта отчет в Screaming Frog и проблемы, которые он проверяет:

При сканировании сайта и XML-карты сайта с помощью Screaming Frog не забудьте запустить Анализ сканирования после завершения обхода (в верхней панели), чтобы заполнить данные в отчете Sitemaps.

Способ 2: сканирование только XML-карты сайта

Второй метод заключается в том, чтобы сканировать только XML-карту сайта и проверять, возвращают ли указанные страницы статус 200 (ОК) или они перенаправлены (код состояния 301 или 302), возвращают статус 4xx или канонизированы.

Этот шаг особенно важен для крупных веб-сайтов, поскольку он может негативно повлиять на краулинговый бюджет (который относится к количеству времени и ресурсов, выделяемых поисковыми системами для сканирования веб-сайта).

Если веб-сайт имеет большое количество неверных URL-адресов в своей XML-карте сайта, это может указывать на то, что поисковые системы тратят свои ресурсы впустую и не сканируют важные страницы.

Поэтому вам необходимо убедиться, что все страницы, указанные в XML-карте сайта, являются каноническими и индексируемыми URL-адресами, возвращающими код состояния 200 (ОК).

Вы можете использовать Кричащая лягушка, JetOctopus, Sitebulbили любой другой аналогичный сканер для сканирования только XML-карты сайта.

Вот как настроить Screaming Frog для сканирования только XML-карты сайта:

• В верхней панели выберите Режим > Список.
• Затем нажмите на Загрузить и выберите Скачать XML-карту сайта.

• Введите URL-адрес карты сайта XML или URL-адрес индекса карты сайта XML. Ударять ХОРОШО.

• Screaming Frog прочитает файл. Как только это будет сделано, нажмите ХОРОШО.

Как только Screaming Frog просканирует карту сайта, вы сможете проанализировать все URL-адреса в стандартном Внутренний > HTML отчет, поскольку все URL-адреса из карты сайта будут отображаться там.

Конечно, также проверьте другие отчеты, такие как Канонические, Коды ответови т. д. Это будет очень интересно, потому что вы все специально анализируете ТОЛЬКО URL-адреса из карты сайта. Это означает, что вы не хотите видеть в отчетах ничего вроде перенаправление, Ошибка клиента, Ошибка сервераи т. д.

Заключительные мысли и советы по аудиту XML-карт сайта

Это должна была быть быстрая и короткая статья, но я, как всегда, переборщил. В любом случае, я надеюсь, что вы узнали что-то новое из этой статьи и стали лучшим SEO-аудитором.

Обязательно ознакомьтесь с другими моими статьями о картах сайта и аудите веб-сайтов с помощью моих любимых поисковых роботов: