Джон Мюллер (John Mueller) — ведущий аналитик компании Google, специалист отдела качества поиска по работе с вебмастерами, на днях в своем Twitter, заявил, что чисто технически, когда Google пытается получить доступ к 404/410 страницам, краулинговый бюджет все же расходуется, но вряд ли он сможет заметно ухудшить сканирование сайта.

Пару дней назад при обсуждении краулингового бюджета Google заверил, что наличие 404/410 страниц на сайте не может влиять на краулинговый бюджет, но Джон все же решил пояснить, что сканирование таких страниц, как правило, выполняются только после того, как просканированы все остальные страницы. Но если Google попытается получить доступ к страницам 404 или 410, технически будет использоваться краулинговый бюджет.

Вот твит Джона:

Как влияет наличие 404/410 ошибок на краулинговый бюджет?

Но опять же, это происходит только тогда, когда Google просканировал все остальные страницы.


Читайте также: Методы оптимизации и ускорения индексации страниц сайта | Google: директива «noindex», не поможет сохранить краулинговый бюджет | Сокращение времени загрузки на сайте увеличивает Краулинговый бюджет