Формат файла robots.txt - особый. Он состоит из записей. Каждая запись состоит из двух полей: строки с названием клиентского приложения (user-agent), и одной или нескольких строк, начинающихся с директивы disallow:

<Поле> ":"

Блогопрос: Алекс Экслер и Антон Попов
Как выглядели сайты для вебмастеров в 98-м году
Бесплатный трафик на сайт
Влияние цвета на отдачу с рекламы
Топ-20 самых дорогих доменов Рунета
Апдейт тИЦ. Тицевый (тицевый?) список блогов-тысячников
Домены RU по дешевке: зачем держать цены?
Бегун снимает ограничения
Нестандартные способы получения ссылок

Компания «РБК Информационные Системы» завершила сделку по покупке сети контекстной рекламы Magna - технологии размещения рекламных объявлений на основе анализа содержания партнёрских сайтов. Об этом сказано в официальном сообщении компании, текстом которого располагает «МедиаБизнес». Цена сделки не разглашается. Также РБК учредил собственное агентство AdSell, которое будет специализироваться на продаже контекстной рекламы.

Читать далее >>

1. Не используйте страницы приветствий

Страницы приветствий – это страницы, на которые вы иногда попадаете при заходе на какой-либо сайт. Обычно они имеют красочное изображение и приглашение войти на сайт вроде “Добро

В декабре во всем мире было сделано 66,2 млрд. поисковых запросов.

Компания «Яндекс» в этом рейтинге заняла девятое место – ее сервис обслужил более 566 млн. поисковых запросов в декабре 2007 г. Доля «Яндекса» на мировом рынке поисковых сервисов составила 0,9%.

Напомним, что в августе 2007 г. «Яндекс» не попал в десятку крупнейших поисковиков по данным comScore.

Первое место в