Дизайн-студия и
Интернет-реклама
+7(495) 908-63-63
info@weblegenda.ru

Как работает робот Google

Аналитик Google Гэри Илльес рассказал на ежегодной конференции SMX East 2014 о том, какие два фактора влияют на сканирование сайта роботом GoogleBot.

Сигналы, которые заставляют робота замедлить или прекратить сканирование, следующие: время соединения и коды состояния HTTP. В первую очередь робот оценивает время соединения со страницей или сервером, и если оно увеличилось, сканирование страниц замедлится или будет приостановлено, чтобы не перегружать сервер. Второй причиной, по которой GoogleBot останавливает сканирование, может быть получение кодов состояния сервера в диапазоне 5xx, что свидетельствует о неудачном выполнении операций по вине сервера. Чтобы не вызвать ещё больше проблем, робот отступит и вернётся позже.

Быстрая
заявка
2009 - © - 2017 Агентство интернет маркетинга ВебЛегенда