Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса — осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально — через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы «спаси могз от обсуждения эфира путина»
Возможно вам будет это интересно
«Пружина» рынка жилья в столице готова разогнуться до $700 за квадрат!
- 8 Сен 2006
- 1,1K views
В результате, как говорит руководитель центра «Индекс рынка квартир» Алексей Перепелкин, «продолжается искусственное нагнетание дефицита квартир». По оценкам…
- 19 Июл 2013
- 884 просмотра
В своих мечтах я вижу себя человеком, который ложиться спать до полночи
- 24 Янв 2012
- 1,2K views
http://www.youtube.com/watch?v=g9f-6jygRJk
- 23 Сен 2011
- 1,4K views
Йоперный театр. Так сегодня праздник! Илья Сегалович, Булат Каримов, Alex Laryanovskiy — с праздником !
- 4 Май 2013
- 1,1K views
Нужно признаться, что я посмотрел фильм Хичкок. Когда же я заставлю себя смотреть хорошие фильмы в кинотеатре…
- 8 Июн 2011
- 976 просмотров
Сегодня узнал удивительный пример (для стартаперов — кейс) эффективности facebook. был приятно удивлен




