Лапицкий, покажи мне деньги!

Сегодня стал проверять позиции клиентов и обнаружил, что многие страницы вывалились из индекса. Сначала был некий шок и непонимание. Залез в панель яши и увидел, что сайты выпали из-за ошибки 403. Судя по показаниям интерфейса вебмастеров Яндекс, выпали страницы, посещаемые ботом с 19 по 26 января. Стал проверять, трясти программистов, но ошибка не была найдена. Стали глядеть в сторону хостинга и в итоге оказалось что со стороны sweb (входить в пятерку по россии) произошла ошибка.

что такое ошибка 403:

Доступ к ресурсу запрещен

Доступ к документу запрещен (получен код 403 Forbidden). Если вы хотите, чтобы страница индексировалась, необходимо разрешить доступ к ней.

Вот что пишут в блоге freelanceblog.ru:

То, что у нас всё делается через попу уже никого не удивляет, но когда это позволяют себе компании, работающие на рынке далеко не первый год, становится реально страшно. И хостинг Space Web, к сожалению, стал тому подтверждением. Причиной разочарования стала ситуация с массовой выпадением страниц из индекса поисковой системы Яндекс, которая повлекла за собой потерю всех позиций. Те, кто использовал панель webmaster.yandex.ru заметили код ошибки 403 (Доступ к ресурсу запрещён) . Чаще всего такое случается из-за неправильно составленного файла robots.txt. Естественно, что первую очередь подозрение пало на сам Яндекс, который, кстати, остался безразличен к проблеме. Вскоре выяснилось, что проблема заключается в самом хостинге. Практически за неделю сотни клиентов хостинга понесли ущерб, измеряющийся десятком тысяч страниц. Как утверждают в тех поддержке, проблема уже решена, но пока что количество исключённых страниц только увеличивается.
Довольно забавным остаётся то, что за всё время, а это практически две недели, не было сделано ни одного официального заявления ни со стороны Спэйсвеба ни от Яндекса. И неизвестно, сколько бы ещё продлилась ситуация, если бы вебмастера не подняли тревогу.

Эпилог: это уже не первый раз, когда sweb радует своих клиентов безупречной работой. Стоить только вспомнить поломку на магистрали в начале прошлого года и вот теперь ситуация повторяется, а женский голос автоответчика не устаёт повторять, что компания sweb входит в пятёрку крупнейший хостингов России…

Что пишет sweb:

Здравствуйте, уважаемые клиенты!

Ни один ваш вопрос или жалоба не останутся без ответа. Нам, конечно же, известно о проблеме индексации сайтов поисковой системой Яндекс. В данный момент наши технические специалисты занимаются решением проблемы, возникшей по нижеуказанным причинам.

В чем была проблема:
У нас, как и у любого другого хостера, есть свои особенности, в том числе и особенности программного обеспечения. Последние изменения в алгоритме работы поисковых роботов Яндекса потребовали изменений в используемом на наших веб-серверах программном обеспечении. Проблема была нетипичной и затронула большое количество серверов, поэтому поиск и реализация решения заняли время.

В настоящее время на серверах массового виртуального хостинга проблема полностью решена. Мы планируем сегодня закончить работы на серверах VIP-хостинга, а затем – на выделенных серверах. Мы делаем все возможное, чтобы в кратчайшие сроки решить проблему корректной индексации ваших сайтов.

Приносим свои извинения за доставленные неудобства.

С уважением, Венедикт Арахнов.