Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса — осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально — через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы «спаси могз от обсуждения эфира путина»
Возможно вам будет это интересно
ищу человека в отдел
- 13 Мар 2006
- 1,1K views
Требуется: Менеджер по рекламе (800-1000) • Производство рекламной продукции (полиграфия, воблеры, широкоформатная печать, сувенирная продукция, POS и т.д.)…
- 20 Апр 2014
- 1,2K views
За сегодня: 300 берпи, 150 присяданий, 150 ситап прессов, 45 подтягиваний, 45 отжиманий, бег 120 метров. Т.е. hades…
- 12 Авг 2011
- 1,0K views
Заголовок новости: «Водонаева обнажила для «Playbay» бюст 5-го размера». Видимо для maxim обнажила 4-го размера. Также со скидкой…
- 5 Май 2011
- 1,0K views
Ребята, у кого есть — пришлите исходники гугла. Нужно пару функций посмотреть
- 26 Янв 2011
- 1,0K views
Из словаря современности. «Взять вопрос под личный контроль»: спустить вопрос на тормозах
- 20 Апр 2013
- 1,0K views
Раздавил стекло на Google Nexus 7 (был в переднем кармане джинс). Гугл что ты делаешь? У меня что…