robots.txt слэш и без слеша URL - какая разница, нужно ли добавлять - Disallow
Primary tabs
Forums:
С одной стороны директива типа:
Disallow: /user
в яндексе и в гугле заблокирует все ссылки начинающиеся с /user в том числе и такие :
somesite.com/user/ somesite.com/user/123
Так что наличие или отсутствие слэша здесь не важно.
НО если написать так:
Disallow: /user/
то
somesite.com/user
(без слеша) - заблокирован не (!) будет, а адрес:
somesite.com/user/123
Будет заблокирован как и раньше.
ВЫВОД: без слэша представляет собой более сильное условие, так как блокирует тот же адрес со слэшем, а вот адрес со слэшем тот же адрес без не блокирует.
- Log in to post comments
- 7548 reads