Записи с меткой: частота сканирования

Google не фиксирует частоту сканирования сайта GoogleBot

25 декабря 2014 года   |  Google

Google не фиксирует частоту сканирования сайта GoogleBotВ форуме помощи веб-мастеров Google обсуждают вопрос, почему GoogleBot сканирует сайт с максимальной скоростью 10 запросов в секунду. Веб-мастер задокументировал поведение бота с и продемонстрировал соответствующий график.

Специалист хотел узнать, почему установлен предел в 10 запросов в секунду, и почему бы не сделать его больше, если сервер может справиться с этим?
Специалист отдела качества поиска Google по работе с веб-мастерами Джон Мюллер (John Mueller) ответил ему, что на самом деле конкретного предела

Читать далее >>
Статьи