Буквально еще несколько месяцев назад сервисы от Яндекса (та же панель вебмастеров СЕО) работали очень стабильно. Да, звезд с неба не хватали, но если от Яндекса приходили какие-то сообщения, то они были реальными, конкретными и полезными. Однако в последнее время ситуация изменилась в худшую сторону.
Вслед за Гуглом, который откровенно опустился по уровню оказываемых услуг и стабильности работы, сервисы Яндекса также всё больше начинают "чудить" и создавать своим пользователям проблемы на ровном месте.
Из панели вебмастера всё чаще совершенно беспричинно начинают валиться самые разные ошибки, вплоть до фатальных.
Содержание
Фатальные ошибки
Вот сегодня утром пришло сообщение (которое, кстати, и доконало мое терпение и я решил написать эту статью), типа "Главная страница сайта ...... недоступна для робота: код ответа страницы «URL запрещён к индексированию тегом noindex». Это может привести к удалению страницы из результатов поиска и потере трафика вашего сайта".
Господа из Яндекса, это какой-то трындец 
Сообщение, естественно, не имеет ничего общего с реальностью, по нескольким причинам:
- Оно пришло не на один сайт, а на несколько, которые сделаны на разных CMS и находятся в разных хостинг-аккаунтах.
- Если проверить указанную страницу "Инструментом проверки URL" самого Яндекса - то там все ок скриншот
- В исходном коде страницы нет вообще никакого тега "noindex" - скрин
Таким образом, Яндекс из-за своих внутренних багов может выкинуть из поиска главную страницу вообще без причин, а также заставить владельца сайта или сеошника в панике тратить время на проверку абсолютно рабочего сайта.
Решение —
Отправить страницу на переобход, пинать техподдержку, ну и платить сеошнику, чтобы он вел ваш сайт, потому что иначе можете остаться с непроиндексированным сайтом просто из-за бага яндекса.
Обновлено
Вот 3 октября 2024 пришло очередное уведомление по очередному сайту, в котором яндекс пишет уже такую формулировку: При обращении к главной странице сайта не удалось получить документ:
Смысл тот же, конечно, страница доступна и формат ответа у нее 200, как и должно быть (сам же яндекс и пишет: Проверьте, что главная страница сайта отвечает HTTP-кодом 200 OK).
Проверка делается средствами самого Яндекса в разделе "Инструменты" - "Проверка ответа сервера"
Как мы видим, всё хорошо.
Отправляем страницу на переобход, это серьезная проблема, сайт может исчезнуть из поиска, так что стоит поспешить.
Баги с картой сайта
В последнее время было замечено несколько багов с картой сайта, загруженной в яндекс еще несколько лет назад и прекрасно работавшей всё это время.
Рядом с адресом карты может быть помещен восклицательный знак (должно быть везде "ок") и при наведении написано "некорректный формат документа", ну и количество проиндексированных страниц будет равно нулю.
В техподдержке уверяли, что это не сказывается на ранжировании страниц, но, согласитесь, лучше чтобы везде все было хорошо.
По результатам проверки выяснилось, что у хостера был какой-то сбой, а яндекс слишком нервно стал реагировать на мелкие сбои и проблемы.
Решение —
Отправить карту сайта на переобход, кликнуть на стрелочки рядом с ней.
Сайт не оптимизирован для мобильных устройств
Часто яндекс пишет в панели вебмастера следующую штуку "По результатам работы алгоритма, определяющего, насколько сайт подходит для мобильных устройств, сайт не удалось признать оптимизированным".
Понятно, что уже сайтов без нормальной мобильной версии не осталось (я лично за последние лет пять не видел ни одного, наверное только rutor исключение), так что вся эта проверка высосана из пальца, но выглядит пренеприятно.
Если кликнуть на "ознакомиться" - то там будет формальная отписка, типа "Сайт не может быть признан оптимизированным для мобильных устройств, поскольку не оптимизирована главная страница" - скриншот
Решение —
Отправить страницу на переобход, убедиться что в robots.txt нет закрытых папок из фронтенда, типа /catalog и т.п. (смотрите правильный robots для вордпресс)
На сайте отсутствует файл robots.txt
Ну а в этом случае робот вообще не нашел файл robots на сайте.
Как такое может быть - непостижимо, с учетом того, что сайт работал стабильно, не падал. И опять же таких сообщений сразу пришло несколько, а все эти сайты принадлежат разным владельцам, сделаны на разных CMS и находятся на разных хостингах.
И в письме пояснение:
Робот не смог получить доступ к файлу robots.txt сайта ... или файл не существует. Из-за отсутствия инструкций и параметров индексирования в поиск могут попасть нежелательные страницы.
Хотя банальная проверка сразу после получения письма в самом же Яндексе показывает, что файл есть и он на месте.
Решение —
Проверить заново карту сайта - кликнуть на кнопку проверить
Выводы и итоги
Будьте готовы к тому, что Яндекс может проверять ваши нервы на прочность, отправляя всякие страшные уведомления из панели вебмастера (СЕО).
Хорошо, если у вас, как владельца сайта, есть свой знакомый сео специалист, он быстро поймет, что причин для паники нет, отправит страницы на переобход или напишет в техподдержку Яндекса и можно спокойно работать дальше.
Но если вы сами занимаетесь продвижением своего сайта, то придется испугаться, потратить время на изучение вопроса (надеюсь моя статья вам его сэкономит), потому что как мне рассказывали владельцы сайтов, у них иногда по несколько дней уходило на выяснение обстоятельств и переписку с техподдержкой то хостера, то яндекса, то веб-разработчика и они никак не могли понять, кто виноват в баге - в то время, когда самом деле никакого бага на сайте вообще не было 
По мере появления новых чудесных и бестолковых уведомлений от Яндекса, буду дополнять эту статью.
А вам Яндекс отправлял пустые уведомления о несуществующих ошибках из панели вебмастеров?
