Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса – осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально – через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы “спаси могз от обсуждения эфира путина”
Возможно вам будет это интересно
- 11 Апр 2011
- 658 просмотров
Кто-то вчера рекламировал голосовой поиск от google для хрома. После 40 (сорока) попыток убедить гугл распознать слово “ежики”…
- 21 Апр 2014
- 865 просмотров
Вот. Есть первые выжившие после hell day во фрилетиксе. Ребята, есть шанс. Вы тоже не умрете. Подтягивайтесь. -)
- 27 Ноя 2011
- 611 просмотров
В ленте массовая истерия и фанатизм по поводу политики. У нас, что, какие-то выборы на носу?
- 23 Июн 2011
- 591 просмотр
По телевизору идет клип группы “Чай вдвоем” “Господин Президент”. Там фигурируем человек больше похожий на Путина чем на…
- 21 Дек 2011
- 622 просмотра
Обновления текстовой базы яндекса не было с 12-го числа. Это уже не только много дольше чем обычно, но…
- 12 Фев 2012
- 641 просмотр
Только-только удалось уложить спать младшую 🙁