Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса — осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально — через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы «спаси могз от обсуждения эфира путина»
Возможно вам будет это интересно
- 26 Апр 2011
- 777 просмотров
Нужны 24 добровольца с детьми. Баскин Робинс организовывает экскурсии на завод мороженного для детей. Но только организованными группами…
- 7 Дек 2011
- 735 просмотров
А говорят в Новосибирске реальный процент ЕР — 9%
- 14 Сен 2011
- 708 просмотров
В папке спам лежит письмо «пора спать». Впервые вижу, чтобы спам был так к месту.
- 9 Сен 2011
- 1,3K views
Поломался narod.yandex.ru. Я в печали и надеюсь, что скоро все исправился. Мне нравилось пользоваться его файл хостингом.
- 8 Июн 2011
- 747 просмотров
Читал ведомости. Я только сейчас понял что онищенко наделал. Это значит, что у нас не будет импортной картошки,…
- 18 Сен 2014
- 1,2K views
Почему важно кодировать так, чтобы по коду было очевидно назначение входящих параметров методов, несмотря на то, что любая…