Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса — осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально — через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы «спаси могз от обсуждения эфира путина»
Возможно вам будет это интересно
- 4 Окт 2012
- 865 просмотров
Впервые за 2 недели болезни зашел в аптеку и купил лекарство. А то 2 недели с простуженным горлом…
- 23 Мар 2012
- 812 просмотров
Ленту наполнили сообщения недельной (или около того) давности. У Цукенберга и лайкающих ностальжи?
- 8 Апр 2011
- 856 просмотров
Начали продавать вербу. Значит поедем с дочкой в выходные в лес на экскурсию
- 22 Июн 2013
- 804 просмотра
Рубрика «Ночные фотки напитков» уехала в инстаграмм и обещала в фб не возвращаться http://instagram.com/alexeyvolkov777
Samsung. Фотоаппарат с системой стабилизации
- 19 Ноя 2010
- 920 просмотров
- 13 Ноя 2012
- 1,2K views
У меня какой-то не правильный аккаунт в вконтактике. Все заводят там аккаунт, чтобы читать мудаков, борща и орленка…