Как случайно попасть под АГС

Оптимизатор

Захожу я 30 декабря на инструменты проверки сайта, и вижу там очень «радостную» новость — в индексе Яндекса присутствует всего 2 страницы данного блога. Через день — они отсутствуют, и в индексе уже другие две страницы. О том, что это АГС, у меня не было сомнений. Первого января я написал товарищу Платону Щукину письмецо с просьбой разъяснить, по какой причине я попал под АГС. Ответ был получен через 10 минут:

27.12.10 наш робот при обращении к Вашему сайту получал файл robots.txt, запрещающий индексирование. В настоящий момент данной проблемы нет, сайт индексируется и в течение двух недель должен появиться в результатах поиска.
Если Вы самостоятельно не размещали файл robots.txt, запрещающий индексирование сайта, то я рекомендую обратиться по данному вопросу к администратору сервера, на котором находится Ваш сайт.

Естественно, что я сразу же написал к своему хостингу, и получил ответ о том, что никаких проблем в тот день не было, и мой robots.txt никто не подменял. Лично у меня, поводов сомневаться в ответе хостера нет, он всегда честно отвечает на вопросы. Даже если он проводит плановые технические работы длительностью в 30 минут, он всегда отправляет смс и сообщает, что сайт в это время может не работать. Поводов для того, чтобы мой роботс.тхт подменили индивидуально тоже нет. Сделать это могли только сотрудники хостинга, дорогу которым, я не переступал. Вирусов сайт тоже не подхвачивал, об этом меня сразу же бы известили Google, Яндекс и сам хостинг.

Поэтому, у меня есть все поводы предполагать, что Яндекс заглючил, и случайно выкинул все мои страницы из индекса. Другого варианта нет.

Далее я хотел бы привести еще несколько возможных вариантов случайного попадания под АГС:

  • При обновлении движка

Известно, что когда движок обновляется, сайт закрывают на техническое обслуживание. Если в это время, к вам наведаются роботы поисковой системы, то есть все шансы получить заветный фильтр.

  • При технических работах в хостинге

Мой хостинг извещает меня о таких событиях с помощью смс. И, что самое главное, во время таких технических работ начинает работать резервный сервер, который берет на себя всю нагрузку и обеспечивает работоспособность сайтов. Проблема в том, что не у всех хостингов есть такие резервные сервера, и во время отключки сайтов, к вам могут наведаться поисковые роботы.

  • При смене дизайна

Был момент, когда я менял один шаблон на другой. В процессе смены, произошла небольшая ошибка, и весь текст моих страниц съехал в одну строку, а дизайн отображался криво. В это время меня посещали роботы Гугла. И было неприятно видеть в кеше кривой дизайн целых 2 недели. В то время, я потерял около 30% трафика, а последствия могли быть и хуже.

Да, многие из этих факторов не зависят от нас, и происходят по вине других. Но если вы будете тщательно выбирать себе хостинг, стараться быстро обновлять движок и как можно меньший промежуток времени держать сайт на техническом обслуживании, то шансы получить фильтры значительно уменьшатся.