SEO-блог Ярыгина Виктора

Бан в Яндексе за внешние факторы

Ситуация (июль 2009 года): Официальный сайт одной компании (блог, в котором размещаются новости, акции, отчеты о мероприятиях компании, сделан на Wordpress, работает с 2007 года, не продвигался), при переезде к другому хостеру, не работал примерно сутки (стояла заглушка). Прошло чуть меньше недели, и он полностью вылетел из индекса Яндекса. Ситуация, к сожалению, стандартная, и ничего плохого она не предвещала, по идее, сайт должен был вернуться в индекс со следующим АПом, но этого не произошло, хотя прошло три недели.

В тех. поддержку Яндекса было отправлено письмо:

Наш сайт http:// ……….ru/ некоторое время назад исчез из поисковой выдачи Вашей системы, до этого несколько лет все было в порядке. В других
поисковых системах сайт присутствует.

Подскажите, пожалуйста, в чем проблема, и как ее можно исправить?

И получен ответ, который все прояснял:

В поисковой системе Яндекс сайты индексируются и участвуют в поиске только по адресу главного зеркала. Главным зеркалом Вашего сайта на данный момент является домен www……….ru, но он отдает нашему роботу 301 перенаправление, а соответственно не может быть проиндексирован.

Если Вы хотите изменить главное зеркало Вашего сайта, воспользуйтесь нашими рекомендациями на странице http://help.yandex.ru/webmaster/?id=995297 . Обратите внимание, что процесс переклейки зеркал полностью автоматизирован и в среднем может занимать до 4–6 недель, ускорить его, к сожалению, нельзя. Также Вы можете снять перенаправление, чтобы сайт начал индексироваться по адресу текущего главного зеркала.

Все стало на свои места: в то время пока сайт был недоступен, пришел зеркальщик Яндекса, и, «недолго думая»,  решил, сайт с www признать главным, а без www – зеркалом.

Было принято решение прописать host, и дождаться повторного прихода зеркальщика, тем более что основным источником посетителей являются вовсе не поисковые системы. Сайт в индекс так и не вернулся, и в техподдержку Яндекса было отправлено еще одно письмо:

Так как редиректа с http://www. ……….ru на сайт без http:// ……….ru оказалось недостаточно, то в robots.txt после Вашего письма, было прописано главное зеркало – host: ……….ru

После Вашего письма и прописывания в роботсе главного зеркала прошел месяц, до сих пор ничего не изменилось.

Данный сайт является официальным сайтом ……….

Мы очень хотим решить данную проблему, и просим Вас сообщить, в чем еще может быть проблема, и как мы ее можем исправить.

Ответ:

Не переживайте, Вы все сделали правильно. После обхода робота-зеркальщика зеркала переклеются. К сожалению, точных дат, когда это будет, я Вам назвать не могу.

Прошел еще месяц, и написано новое письмо:

У сайта http:// ……….ru до сих пор главным зеркалом является http://www. ……….ru Но такого сайта не существует, так как есть редирект с www на без www, и соответственно оба сайта сайт отсутствует в Вашей поисковой системе.

Кроме редиректа в robots.txt уже два месяца прописано, что сайт без www является главным зеркалом.

Повторюсь, что данный сайт является официальным сайтом компании ……….  И очень обидно, что сайт ……….  нельзя найти в поисковой системе Яндекса уже три месяца, а только в других поисковых системах.

С момента начал нашей переписки, где Вы сообщили, что все будет хорошо, прошло уже два месяца, а Ваш робот, как Вы написали сделает это за 4-6 недель. Возможно что-то еще на нашем сайте не в порядке, раз Ваш робот отказывается нас расклеить. Очень просим сообщить нам, что мы можем сделать, чтобы решить данную проблему как можно скорее.

Ответ техподдержки:

Чтобы сайт вернулся в поиск, рекомендуем снять редирект. К сожалению, процесс переклейки зеркал может занять более длительное время, чем 6 недель.

Редирект был снят, и сайт через неделю вернулся в поиск с www. Да, кстати, в начале декабря зеркальщик Яндекса все же одумался.

Наверно, при прочтении, у многих возник вопрос: – Неужели нельзя было проверить сразу, например, добавив сайт в “аддурилку” или в Яндекс-вебмастер, и выяснить, что сайт без www является зеркалом? Или хотя бы сразу же после первого письма техподдержки убрать редирект? Конечно, можно было, но произошло все так, как произошло.

Так к чему я это все рассказываю? К тому, что в вылете из индекса можно обвинить:

1. Облако тегов, которое было на сайте;
2. Изредка появляющийся спам в комментариях;
3. Собственно 301 редирект;
4. Кривые руки программиста, при переносе сайта с хостинга на хостинг;
5. Оптимизатора, сразу не прописавшего host в роботсе;
6. Движок wordpress, и все движки, автоматом прописывающие редирект;
7. Хостинг;
8. Так далее.

На самом деле, на время технических работ на сайте стояла заглушка (редиректа на заглушке с www на без www не было). Робот-зеркальщик, скорее всего, сделал вывод о главном зеркале по входящим естественным ссылкам, которых за три года накопилось около 50 штук, и почти все они, по странному стечению обстоятельств, ссылаются на сайт с www. Получается, что во временном вылете из индекса  виноваты естественные ссылки))).

Так что не спешите обвинять что-либо, или кого-либо, а сначала разберитесь в ситуации подробно, возможно, как и в этом случае, бана просто не было.

Я надеюсь, что SEO-мифов после статьи с таким заголовком станет меньше.

12 Responses to “Бан в Яндексе за внешние факторы”