Все привет, как сделать, чтобы робот Яндекс не скачивал статьи от Библиотеки? Что нужно прописать на файл robots.txt? Заранее спасибо
Наоборот надо давть роботу скачивать, индексировать статьи из библиотеки иначе вообще смысла нет..
Или у тебя там порнушка
..
---
Disallow: /library/
User-agent: Yandex
Disallow: /library/index.php?act=download*
# Blade (22.12.2015 / 10:18)
User-agent: Yandex
Disallow: /library/index.php?act=download*
а разве в библе есть скачать статью уже ?
Если робот будет индексировать библиотеку это наоборот лучше будет много посетителей.
# Fublin (22.12.2015 / 12:48)
а разве в библе есть скачать статью уже ?
Есть, тут библиотеку глянь