При анализе в вебмастере дублируется строка sitemap в файле robots.txt (webflow), что не так?

Здравствуйте, коллеги. Помогите пожалуйста.
Сайт на webflow. В админке в файле robots.txt все красиво, но при его проверке в яндекс.вебмастере почему-то появляется дубль строки sitemap.
Я подозревала, что дело в какой-нибудь галочке, но те галочки которые у меня стоят, они явно не про это.

Выглядит это примерно так:
Allow: /*.png
Disallow: */styleguide*
Host: https://www.xxx-xxx.ru/

Sitemap: https://www.xxx-xxx.ru/sitemap.xml

Sitemap: https://www.xxx-xxx.ru/sitemap.xml

Дополнительно:

Оказалось, что все таки откуда-то он подтягивает эту строку. Я из файла роботса вручную шмальнула строку с sitemap и теперь все ок.

+ Заказать

 

Для решения данной проблемы вы можете воспользоваться услугами фрилансеров. Мы выполним необходимую работу быстро и качественно.

 

    • При анализе в вебмастере дублируется строка sitemap в файле robots.txt (webflow), что не так?Есть ответ
    • 07.04.2024
    Ответить

    Когда веб-мастер обнаруживает, что строка sitemap дублируется в файле robots.txt на сайте, это может указывать на некоторые проблемы с настройкой файлов и индексацией страниц.

    Во-первых, дублирование строки sitemap в файле robots.txt может привести к некорректной индексации страниц поисковыми системами. Это может быть вызвано тем, что поисковые роботы могут не понимать, какую карту сайта использовать для сканирования и индексации страниц. Это может привести к тому, что некоторые страницы не будут проиндексированы или будут проиндексированы неправильно.

    Во-вторых, дублирование строки sitemap может свидетельствовать о проблемах с конфигурацией сервера или CMS сайта. Возможно, что ошибка возникла из-за неправильной настройки системы управления контентом или сервера, что может привести к другим проблемам с индексацией и SEO оптимизацией сайта.

    Чтобы исправить эту проблему, необходимо удалить дублирующую строку sitemap из файла robots.txt и убедиться, что в этом файле указан только один путь к карте сайта. Также необходимо проверить настройки сервера и CMS, чтобы исключить возможные причины дублирования строки sitemap.

    Кроме того, рекомендуется периодически проверять файл robots.txt и карту сайта на наличие ошибок и обновлять их при необходимости, чтобы обеспечить правильную индексацию и оптимизацию сайта для поисковых систем. Внимательное отслеживание и исправление подобных проблем поможет улучшить SEO показатели сайта и повысить его видимость в результатах поиска.

Оставить комментарий