Команда Google Search Relations подтверждает, что непроиндексированные страницы не влияют отрицательно на краулинговый бюджет веб-сайта, независимо от их количества.
Эта тема затрагивается не один, а три раза во время сеанса вопросов и ответов Google в рабочее время по SEO в ноябре 2022 года.
Адвокаты Google Search Джон Мюллер и Гэри Иллиес по очереди отвечают на три одинаковых вопроса людей, обеспокоенных тем, что на их сайтах слишком много непроиндексированных страниц.
Из ответов Мюллера и Иллиеса мы узнали, что не существует такого понятия, как «слишком много» проиндексированных страниц. Кроме того, если на вашем веб-сайте не более миллиона страниц, вам не нужно беспокоиться о краулинговом бюджете.
Вот краткий обзор каждого вопроса и ответа.
Вопрос 1: Слишком много проиндексированных страниц
На отметке 8:23 часов работы Google в ноябре 2022 года Иллиес отвечает на вопрос, спрашивая, является ли «чрезмерное» количество проиндексированных страниц проблемой для обнаружения или индексации.
Иллиес говорит, что noindex — это инструмент, помогающий веб-сайтам скрывать контент от поисковых систем. Google рекомендует использовать тег noindex, когда это необходимо, и по этой причине с ним не связаны неблагоприятные последствия.
«Noindex — это очень мощный инструмент, который поддерживают поисковые системы, чтобы помочь вам, владельцу сайта, не допустить попадания контента в их индексы. По этой причине он не имеет непредвиденных последствий при сканировании и индексировании. Например, наличие большого количества страниц без индекса не повлияет на то, как Google сканирует и индексирует ваш сайт».
Вопрос 2: Соотношение проиндексированных/неиндексированных страниц
На отметке 10:22 возникает следующий вопрос:
«Должны ли мы следить за соотношением между проиндексированными и непроиндексированными страницами в Search Console, чтобы лучше распознавать возможную трату краулингового бюджета на непроиндексированных страницах?»
Мюллер опровергает мнение, что веб-сайты должны пытаться сбалансировать свои проиндексированные и неиндексированные страницы.
С этой целью краулинговый бюджет является фактором, о котором нужно думать лишь немногим сайтам; Мюллер говорит:
«Нет, нет никакого магического соотношения, которого нужно остерегаться. Кроме того, для сайта, который не является гигантским, с менее чем миллионом страниц, возможно, вам действительно не нужно беспокоиться о краулинговом бюджете вашего сайта. Можно удалить ненужные внутренние ссылки, но для небольших и средних сайтов это больше вопрос гигиены сайта, чем SEO».
Вопрос 3: Непроиндексированные страницы, на которые ведут ссылки со спам-сайтов
На отметке 11:26 возникает вопрос об отсутствии проиндексированных страниц, немного отличающихся от двух предыдущих.
Вопрос гласит:
«Многие SEO-специалисты жалуются на то, что миллионы URL-адресов помечены как исключенные noindex в Google Search Console. Все к чепухе внутренних поисковых страниц, связанных со спамными сайтами. Является ли это проблемой для краулингового бюджета?»
Ильес повторяет более раннее замечание о том, что noindex является инструментом, который сайты могут использовать по мере необходимости.
Если предположить, что страницы намеренно не проиндексированы, не нужно беспокоиться о том, что Search Console пометит их. Это не значит, что вы делаете что-то не так.
Иллиес заявляет:
«Noindex предназначен для того, чтобы помочь вам не вносить какие-либо элементы в индекс, и он не приводит к непреднамеренным негативным последствиям, как мы говорили ранее. Если вы хотите, чтобы эти страницы или их URL-адреса не попали в индекс Google, продолжайте использовать noindex и не беспокойтесь о краулинговом бюджете».
Источник: Google