Почему Google ругается на robots.txt?
Google не индексирует сайт, ссылаясь на блокировку в robots.txt. Хотя в robots.txt нет блокировки для индексации. Директивы задавал следующие (а так же много других...
›robots.txt
В этой метке собраны вопросы по «robots.txt»: от базовых настроек метатегов до индексации, canonical и поисковых роботов. Ответы помогают проверить страницу, найти технические слабые места и не делать лишних SEO-правок.
7
вопросов
6
ответов
6
пользователей
Параметр Clean-param в robots.txt. Как подружить Google и Yandex одновременно?
О том что параметр Clean-param не воспринимается гуглом, уже писалось и не раз (и на самом Яндексе тоже). С этим все понятно. Но как...
›Проиндексировано, несмотря на блокировку в файле robots.txt, как исправить?
Google такую выдал ошибку. Интересно, что указывает ссылку на страницу авторизации с редиректом: https://basseyn-svoy.ru/wp-login.php?redirect_to=h... Если перейти по ней, то будет страница авторизации. После авторизации...
›DDOS атака на сайт WordPress. Как заблокировать WPscan?
На хостинге Regru превышен лимит CPU в 13%. Изучив в чем проблема, вышел на то, что некий User agent - Wpscan каждый день делает...
›При анализе в вебмастере дублируется строка sitemap в файле robots.txt (webflow), что не так?
Здравствуйте, коллеги. Помогите пожалуйста. Сайт на webflow. В админке в файле robots.txt все красиво, но при его проверке в яндекс.вебмастере почему-то появляется дубль строки...
›Почему google не видит robots.txt?
гугл перестал видит у сайта, сам сайт блокирует иностранные айпи, но проверял на доступность для ip-адресов googlebots, все возвращают 200 ответ, нигде не стоит...
›Откуда генерятся такие ссылки?
Откуда генерятся такие ссылки? https://pirogibulki.com/sexgeschichten-fuer-maenner-charlottenburg-nuernberg-breitenauer-see-fkk-sex-perfume-dating-geil-abs.php https://pirogibulki.com/machen-lancy-dating-plattform-wien-braunau-fuer-frauen-sybian-leihen-sperma-weit-spritzen-swinger-gi.php Дополнительно: а где вы их нашли? Скорее всего на сайте вирус. У меня было нечто подобное. В аналитике...
›