Robots User-agent: Yandex блокирует все другие записи?
Здравствуйте.
Если в файле есть Директива User-agent: Yandex, то почему то не учитываются некоторые директивы в файле.
Пример:
User-agent: * Disallow: /vk/my/ User-agent: Yandex Allow: /yandexmarket/e15150e5-94f.xml Sitemap: https://site.ru/sitemap... Host: site.ru Crawl-delay: 10
Тогда запись Disallow: /vk/my/ игнорируется. Почему так?
1 ответ
Все́, нашел.
https://yandex.ru/support/webm...