Записи с меткой: экономия краулингового бюджета

Google: метатег noindex не помогает сэкономить краулинговый бюджет

5 декабря 2016 года   |  Google

Google: метатег noindex не помогает сэкономить краулинговый бюджетПредставитель Google Джон Мюллер подтвердил, что метатег noindex не помогает сэкономить краулинговый бюджет сайта. То же самое, по большей части, справедливо и в отношении атрибута rel=canonical.

Чтобы обнаружить метатеги, Googlebot должен просканировать страницу и, соответственно, израсходовать часть краулингового бюджета. Таким образом, noindex предотвращает индексирование страницы, но не сканирование.

Для большинства вебмастеров это очевидно, однако вопросы на эту тему периодически поднимаются среди

Читать далее >>
Статьи