Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса — осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально — через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы «спаси могз от обсуждения эфира путина»
Возможно вам будет это интересно
- 28 Сен 2011
- 819 просмотров
Уважаемый Яндекс, верни пожалуйста обратно цифровую капку. Или хотя бы научит пунтосвитчер не менять раскладку при наборе текстовой…
- 19 Окт 2013
- 817 просмотров
А какие есть сервисы/группы для поиска квартир в аренду?
- 18 Авг 2011
- 758 просмотров
Хренов RDS bar обновлися в хроме и раскрасил все неиндексируемые ссылки подчеркиванием, а noindex желтым фоном. Пришлось удалить
Нара
- 12 Авг 2002
- 1,1K views
В воскресенье ездил в нару. Думал о смысле жизни, портили настроение девушке из раздаточной мак-авто, докопались до их…
- 9 Фев 2011
- 759 просмотров
«»Романа Абрамовича вытеснили из тройки самых богатых россиян» Вероятно, если из состояния РА-2003 вычесть сегодняшнее состояние, то мы…
- 26 Янв 2012
- 829 просмотров
Кто-нибудь уже подключал почту для домена у Яндекса? Мне пугает надпись «Проверка подключения домена может занять продолжительное время»,…