В июне поисковая система Google опубликовала справочную информацию для веб-мастеров о влиянии разных ошибок на индексирование сайта.
В документе описывается реакция Googlebot на разные коды:
- 2ХХ позволяет странице попасть в индекс, но не гарантирует ее индексацию;
- 3ХХ сообщает о редиректе, при этом поисковый робот может выполнить до 10 переходов по цепочке в зависимости от user agent. Если контент так и не будет обнаружен, в Search Console отобразится ошибка;
- 4ХХ сообщает об отсутствии страницы. Если ранее проиндексированный URL стал возвращать 4ХХ, он удаляется из индекса и, соответственно, перестает ранжироваться;
- 5ХХ и 429 становятся сигналом для поискового робота о замедлении процесса сканирования и индексирования, при сохранении ошибки страницы могут быть удалены из индекса.
У владельца сайта или веб-мастера есть только несколько дней на устранение ошибок с проиндексированными страницами, в противном случае они будут удалены из индекса. Данные о проблемах отображаются в отчете Search Console.
