Аврора: продвижение сайтов » Новости компании » Какие факторы влияют на сканирование сайта GoogleBot?

Какие факторы влияют на сканирование сайта GoogleBot?

[10.10.2014] Какие факторы влияют на сканирование сайта GoogleBot?

Для сканирования сайта Google использует 2 сигнала для поисковой системы, с помощью которых она определяет, когда роботу GoogleBot следует замедлить или остановить процесс:

• Время соединения (Connect Time)

Google смотрит на длительность установления соединения с сервером или веб-страницей. Если она становится все больше, он отступит и замедлит или остановит сканирование страниц сайта. Чтобы в конечном итоге не привести к остановке сервера, Google использует время соединения как фактор сканирования.

• Коды состояния HTTP (HTTP Status Codes)

Google также остановит или замедлит сканирование, если получит коды состояния сервера в диапазоне 5хх. Коды 5xx выделены под случаи неудачного выполнения операции по вине сервера.

В обоих случаях GoogleBot вернется к этому интернет-ресурсу позже, но отступит опять, если увидит указанные два сигнала, чтобы не вызвать еще больше проблем для пользователей, пытающихся зайти на сайт.