Джон Мюллер сообщил о том, что только общее качество сайта, а не отдельных страниц, влияет на то, насколько тщательно поисковые роботы будут его индексировать:“20% страниц моего сайта не индексируются поисковыми роботами. Они их обнаруживают, но не сканируют.
Может ли это происходить из-за того, что мой сервер перегружен? Или это как-то связано с качеством этих страниц?”
Помимо этого, Джон Мюллер посоветовал не беспокоиться из-за того, что 20% ресурса не просканированы поисковыми роботами:“Как правило, если мы говорим о небольших сайтах, то дело не может быть в перегрузке или в ограничении количества страниц для индексации.
Если же речь идёт о ресурсе с миллионами страниц, то да, проблема может заключаться и в этих вещах…
…Что касается качества сайта, то оно играет большую роль в процессе индексации его страниц.
Если у вас есть пять страниц, которые в настоящее время не индексируются, это не значит, что наши поисковые роботы игнорируют их из-за плохого качества.
Вполне возможно, что, ознакомившись со всем вашим ресурсом, мы сделали вывод о том, что он не соответствует должному уровню качества. И именно поэтому мы не будем индексировать все его страницы.
Так что я бы размышлял и действовал в этом направлении… если у вас небольшой сайт, и вы видите, что значительная часть его страниц не индексируется, вам стоит сделать паузу и обратить своё внимание на его качество. При этом не стоит фокусироваться на каких-то технических проблемах страниц”.
Таким образом, можно выделить пять советов Джона Мюллера касаемо индексации:“Не стоит забывать о том, что ситуации, когда мы не индексируем каждую страницу сайта — нормальны. Это привычная для нас практика, и она касается ресурсов любого размера.
Количество сканируемых роботами страниц может меняться, но мы никогда не будем индексировать весь сайт на 100%.
Поэтому, если у вас 100 страниц и где-то 80 из них не индексируются — в этом нет никакой проблемы, и вам не нужно ничего решать”.
Если 20% страниц на сайте не индексируются — это нормально.
Технические проблемы на страницах не мешают их индексации.
Общее качество сайта может влиять на то, сколько его страниц просканируют роботы.
Количество индексируемых страниц варьируется от сайта к сайту.
У небольших сайтов, как правило, нет ограничений на количество единоразово индексируемых страниц.