Записи с меткой: follow

Сегодня в СМИ

  • Комментарии

    • mogzem: Полезная информация для родителей - на что обратит »

    • Вадим: Спасибо за новость »

    • Анастасия: Очень люблю такую маску! Кстати, мёд тоже :) Ещё я »

    • onlinemixx: А спецы америкосов стопроцентов уже давно имеют до »

    • onlinemixx: Сколько людей - столько мнений, способов и прочего »

AdSense AdWords Android AOL Apple Bing Facebook google Google AdWords Instagram Mail.ru Mail.ru Group Microsoft rambler telegram Twitter Vkontakte WhatsApp Yahoo YouTube Контекстная реклама Мэтт Каттс Однокласники Раскрутка Реклама Россия Яндекс.Директ Яндекс Директ бегун в контакте интернет новая функция новости обновление однокласники поиск пользователи продвижение рунет сайт социальная сеть социальные сети статистика тестирование яндекс

На чем я зарабатываю:

seopult

Последние твиты

    Где раскручивать сайт:

    seopult

    Архив записей

    Все о Robots.txt

    28 января 2008 года   |  Поисковые системы

    Поисковые сервера всегда перед индексацией вашего ресурса ищут в корневом каталоге вашего домена файл с именем "robots.txt" (http://www.mydomain.com/robots.txt). Этот файл сообщает роботам (паукам-индексаторам), какие файлы они могут индексировать, а какие нет.

    Формат файла robots.txt - особый. Он состоит из записей. Каждая запись состоит из двух полей: строки с названием клиентского приложения (user-agent), и одной или нескольких строк, начинающихся с директивы disallow:

    <Поле> ":"

    Читать далее >>
    Статьи