Здравствуйте коллеги!
Хочу предложить идею добавить сортировку поселений для генерации правильного sitemap.xml
Аргументы: файл карты сайта поисковый робот обходит сверху вниз.
В текущем виде, когда правила дублируются из маршрутизации, основной домен (сайт, приложение) находятся в конце списка, что негативно влияет на индексацию, а у поискового робота есть лимиты времени на индексацию, в результате важное поселение будет проиндексировано последним.
1 комментарий
Всё с картой сайта в порядке. Изначально в sitemap.xml содержатся ссылки вида, которые позднее обходятся в разное время по отдельности и независимо друг от друга и порядка их размещения.
Но кто вам мешает забросить в robots.txt вручную ссылку
и поставить её первой в списке т.е. выше основной sitemap.xml. Пользы от этого не будет, но возможно станет спокойнее.
Яндекс-робот не испытывает проблем от ссылок на несколько карт из robots.txt. И вообще он кладёт на ваш порядок сверху-вниз. Этот порядок, который задается в Структуре приложений для робота-обходчика пустой звук. Вот вам и примеры на скриншотах ниже.
Очередная сказка СЕОшников, которые уже не знают как им ещё извернуться. Если проблемы с обходом карты в принципе, то прогоните разок принудительно вручную через Вебмастера или Search Console.