Facebook

Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса — осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально — через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы «спаси могз от обсуждения эфира путина»

0 Shares:
Возможно вам будет это интересно

Facebook

На бирже фриланса повесил объявление о сборе данных по российским сайтам. Только что фрилансер прислал ссылку на киевский…
Смотреть заметку

Facebook

Я тут присмотрелся к видео Ленинграда внимательней. Александр Алавин, ты как всегда был прав. Блондинка круче чем Коган…
Смотреть заметку

9

Смотреть заметку

Мир без Лужкова….

В течении недели в Москве: исчезнут пробки пропадет коррупция появятся садики заработает нормальное такси стоимость коммунальных услуг будет…
Вот я не пью неделю. И желания напиться у меня совсем нет. А вот меня сейчас отвозит домой…