Robots.txt
История такая, сайту несколько лет, скорее вэб приложение, индексации нет,
разработчик обещал и не доделал, и за сео деньги брал и за доработку, вообщем сейчас его уже нет на связи или в живых (хз что с ним, то ли ковид, то ли СВО, то ли просто уехал в тибет).
сайт на хостинге, работает на автомате, агрегатор новостей, парсит новости
руки никак не доходили доделать то чтоб поисковики хотяб искали, проблемы в файле robots или sitemap
вообщем хз в чем проблема, разбераюсь, но не профи.
сегодня гугл прислал сообщение, в приложении
На ресурсе хххххххх обнаружены проблемы (Индексирование страниц)
Владельцу ресурса хххххх
На вашем ресурсе обнаружена одна или несколько проблем (1) следующего типа: Индексирование страниц. Они перечислены ниже. Советуем вам по мере возможности устранить эти проблемы. Тогда в Google будет показываться больше страниц вашего сайта, а их позиции в результатах поиска улучшатся.
Основные проблемы
- Заблокировано в файле robots.txt