Запретить роботу Yandex скачивать

Последняя активность
Файлы топика
248
.
Like
22 дек 2015 г., 9:22

Все привет, как сделать, чтобы робот Яндекс не скачивал статьи от Библиотеки? Что нужно прописать на файл robots.txt? Заранее спасибо

.
Fublin
22 дек 2015 г., 9:46
Изменено

Наоборот надо давть роботу скачивать, индексировать статьи из библиотеки иначе вообще смысла нет..
Или у тебя там порнушка ..

---

Disallow: /library/

.
Blade
22 дек 2015 г., 10:18
The Frontend-Warrior

User-agent: Yandex
Disallow: /library/index.php?act=download*

.
Fublin
22 дек 2015 г., 12:48
# Blade (22.12.2015 / 10:18)
User-agent: Yandex
Disallow: /library/index.php?act=download*
а разве в библе есть скачать статью уже ?
.
MaxPro
22 дек 2015 г., 12:51

Если робот будет индексировать библиотеку это наоборот лучше будет много посетителей.

.
Blade
22 дек 2015 г., 14:13
The Frontend-Warrior
# Fublin (22.12.2015 / 12:48)
а разве в библе есть скачать статью уже ?
Есть, тут библиотеку глянь
Всего: 6
© 2026, JohnCMS