User-agent: YandexSomething
Disallow: /
А происходит следующее, Яндекс перестает индексировать ваш сайт вообще!
И это не глюк интерфейса вебмастера, логи nginx-а говорят о том же.
Причину почему он тупит сейчас выясняем, но на будущее стоит осторожнее относиться к Яндексу, он очень обидчив и мстителен, надеюсь что по-неосторожности.
UPD спасибо @gray_ru обещали починить
6 комментариев:
вот идиоты. запретили доступ Яндексу а потом удивляются чему-то.
умник, Яндекс признал ошибку и ее сейчас исправляют. Мы не запрещали доступ поисковому боту.
Учите матчасть, читайте хелп яндекса для вебмастеров. Может не будете больше винить Яндекс в своей криворукости
интересно сколько еще ровноруких умников отправит нас читать хелп. Повторяю для особо ментально одаренных - Яндекс ПРИЗНАЛ что это ошибка и ее исправят.
https://twitter.com/gray_ru/status/2237854119
Также есть письмо от службы поддержки аналогичного содержания.
Такой robots.txt закрывает индексацию от корня
Яндекс же признал только что быстробот назывался по другому
Кстати могу помочь с настройкой сервака - и не такое делал
Отправить комментарий