«Поскольку обычные мобильные телефоны и смартфоны стали слишком сильно различаться по функционалу и возможностям, наметилась следующая тенденция: вебмастера по неосторожности

Алгоритм действий несложен и состоит из пяти шагов:

1. Проверка HTTP-заголовков, передаваемых сервером

2. Создание файла robots.txt и запрета в нем обхода технических и служебных разделов сайта

3. Проверка возможности проставления

Руководство касается:

- содержания тегов, учитываемых роботом Яндекса (Keywords, Description, Content-Type, refresh);

- указания мета-тегов (meta name=”robots”, noindex и nofollow). Если мета-теги не указаны, по умолчанию они имеют положительное значение (index, follow, archive). В случаях конфликтов между тегами робот делает выбор в пользу значения по умолчанию;

- использования тега noindex для запрета индексирования служебных участков текста. Тег noindex не чувствителен к вложенности и может находиться в любом месте html-кода страницы;

- использования атрибута rel=”nofollow” в теге a. Атрибут работает аналогично мета-тегу со значением nofollow, но распространяется только на ссылку, для которой указан.