Пример robots.txt для яндекс и Google - несколько Sitemap
Primary tabs
Пример файла, подходящего одновременно для Яндекса и Гугла:
User-agent: Yandex
Disallow: /some/url/1
Disallow: /some/url/2User-agent: *
Disallow: /some/url/1
Disallow: /some/url/2
Sitemap: http://example.com/sitemap.xml
Sitemap: http://example.com/sitemap1.xml
Sitemap: http://example.com/sitemap2.xml
- vedro-compota's blog
- Log in to post comments
- 5707 reads
Comments
vedro-compota
Tue, 04/16/2019 - 18:37
Permalink
новое для яндекса
Для Яндекса рекомендуется прописывать директиву "Host"Получается яндекс уже на директиву Host в robots.txt и не смотрит: https://yandex.ru/support/webmaster/cont...
_____________
матфак вгу и остальная классика =)