Количество проиндексированных страниц сильно прыгает. Как правильно?
Сайт https://1ya.ru (товарно-аналитический агрегатор, отслеживает цены, спрос и т.д., это не просто дубликаты страниц, но еще и полезный для юзера контент). Хотя наверняка гуглу не понравится 80% этих страниц.
Проблема в том, что если смотреть все проиндексированные страницы, т.е. искать "site:1ya.ru" то каждый день выдача прыгает от 30 тыс до 200 тыс. Чему верить?
Все усложняется тем, что если я хочу посмотреть проиндексированное в рамках https://1ya.ru/goods/ (только страницы товаров) через "site:1ya.ru/goods" то там периодично миллионы страниц появляются.
Как всё-таки смотреть правильно количество страниц в индексе?
Дополнительно:
Ответы:
Через гугл сёрч консоль самое верное.
Там же можно через sitemap.xml разбивая этот файл страницы по директориям более детально отслеживать.
- про сайтмап не понял
сайтмап товаров
вот ссылка на него, там вроде все разбито как нужно - zaartix, вроде бы да, у вас в сайтмапе именно то, о чём я говорил. Разбивая сайтмап на отдельные файлы, вы можете в сёрч консоли отслеживать информацию по каждому из них.
- Александр Денисов, поясните пожалуйста, как это можно сделать?
- zaartix,
Более детальная информация по каждому сайтмапу.
Опишите проблему, и специалист поможет с настройкой, исправлением ошибки или доработкой сайта. Подберём понятный план работ без лишней переписки.
Пока нет других ответов. Будьте первым, кто поможет автору.
Ответить на вопрос

Для того чтобы решить проблему с резким прыжком количества проиндексированных страниц на вашем сайте, вам следует принять несколько мер:
1. Проверьте robots.txt: Убедитесь, что ваш файл robots.txt настроен правильно и не блокирует доступ к страницам, которые должны быть проиндексированы. Проверьте, нет ли в нем ошибок или опечаток.
2. Проверьте sitemap.xml: Убедитесь, что ваш файл sitemap.xml содержит только актуальные страницы вашего сайта. Используйте инструменты, такие как Google Search Console, чтобы проверить, нет ли ошибок в вашем sitemap.
3. Проверьте наличие дубликатов контента: Используйте инструменты для поиска дубликатов контента и устраните их. Дубликаты контента могут привести к проблемам с индексацией страниц.
4. Обновляйте контент регулярно: Регулярное обновление контента на вашем сайте поможет поисковым роботам чаще индексировать ваш сайт. Это также поможет удерживать посетителей на сайте.
5. Используйте правильные мета-теги: Убедитесь, что у вас правильно настроены мета-теги title и description на всех страницах вашего сайта. Они помогут поисковым системам правильно проиндексировать ваш контент.
6. Оптимизируйте скорость загрузки сайта: Быстрая загрузка страниц также важна для индексации вашего сайта. Оптимизируйте изображения, используйте кэширование и минификацию файлов для улучшения скорости загрузки.
Применяя эти рекомендации, вы сможете устранить проблему резкого прыжка количества проиндексированных страниц на вашем сайте и повысить его общую видимость в поисковых системах.