Facebook

Проводил эксперимент. Несколько десятков сатов под АГС. Запретил индексацию через robots.txt. Ушли из индекса — осталось только по 1 страница, да и то только url и title. Разрешил индексацию в robots.txt. И моментально — через несколько часов в индексе стало 2 страницы. Боты Яндекса так интенсивно проверяют АГС сайты? пост написан в рамках программы «спаси могз от обсуждения эфира путина»

0 Shares:
Возможно вам будет это интересно
Смотреть заметку

Facebook

За 2 дня мои скрипты нашли более 100 свободных доменов с тИЦем. Так то
Смотреть заметку

Facebook

Друг подвозил мужичка. Тот оказался капитаном ГИБДД. Поговорили о том, что переименованием в полицию должны были победить и…
Смотреть заметку

Старт проекта

Еще одна вещь, которую так и не удалось внедрить на 100% (в первую очередь из-за того, что постоянно…
Смотреть заметку

Facebook

Сейчас подумал, что если «что» случится, то на мои поминки даже видео сделать в adobe effects не получится.…
Смотреть заметку

Facebook

На главной Яндекса реклама планшета самсунг, которая ведет на 404. Жду заявлений Самсунга на какой-нибудь из конференций, где…
Смотреть заметку

up тИЦ

Нужно отметить, что последний декабрьский апдейт тИЦа Яндекса – самый поздний за всю историю существования этого критерия. Ранее…