Хотелось бы роботам запретить их обход. Пример ссылки /catalog//jhfekj_wqe/adsad
Если я добавлю правило Disallow: /catalog//*
Будет ли оно верным?
.gif)
Правило для robots
206
Virtuozzo
23 сен 2020 г., 12:07
Всем привет. Есть ссылки на сайте содержащие двойной слеш //
Хотелось бы роботам запретить их обход. Пример ссылки /catalog//jhfekj_wqe/adsad
Если я добавлю правило Disallow: /catalog//*
Будет ли оно верным?
Хотелось бы роботам запретить их обход. Пример ссылки /catalog//jhfekj_wqe/adsad
Если я добавлю правило Disallow: /catalog//*
Будет ли оно верным?
Casper
23 сен 2020 г., 12:47
Virtuozzo, ответ на Ваше сообщение (23.09.2020 / 13:07): А зачем у тебя так косячно mod rewrite настроен? Для поисковиков ни есть хорошо двойные слеши
Virtuozzo
23 сен 2020 г., 12:55
Casper, Суть вопроса другая была. )
Делали правки, не заметили сразу косяк со вторым слешем.)
Делали правки, не заметили сразу косяк со вторым слешем.)
Simba
23 сен 2020 г., 14:37
Кадило крутится, лавэха мутится
https://webmaster.yandex.ru/to ... stxt/
Тут можно проверять корректность файла robots.txt
Тут можно проверять корректность файла robots.txt
Всего: 4
© 2024, JohnCMS