Flash (07.03.2013 / 11:03)хоть бы кто по теме сказал
Он у него продукты с холодильника ворует.
Что за бот??
1.06K
espo
7 мар 2013 г., 11:05
Flash
7 мар 2013 г., 11:08
Клоун с Газика
espo, по теме уже сказали. Что это за бот и как его отгородить.
espo
7 мар 2013 г., 12:01
Flash (07.03.2013 / 11:08)Я задал вопрос и ни кто не ответил:
espo, по теме уже сказали. Что это за бот и как его отгородить.
User-agent: AhrefsBot
Disallow: /
вписал, но он всё равно шуршит...
у меня стандартный робот.тхт от джона
User-agent: *
Disallow: /panel/
Disallow: /download/arctemp/
Disallow: /files/forum/attach/
Allow: /
куда воткнуть выше указанную хрень, чтобы забанить этого бота?
Bekk777
7 мар 2013 г., 12:31
espo, /7puMepHo TaK
Pillott
7 мар 2013 г., 12:43
Enter нажат, к чему теперь рыданья…
espo (07.03.2013 / 12:01)В файле robots.txt ты указываешь что робот не должен выдавать отсканированную информацию в поиск, т.е. в паблик. Но этим файлом ты не можешь запретить роботу сканировать сайт. Это делается через .htaccess или через движок. Забань его по ip.
Я задал вопрос и ни кто не ответил:
User-agent: AhrefsBot
Disallow: /
вписал, но он всё равно шуршит...
у меня стандартный робот.тхт от джона
User-agent: *
Disallow: /panel/
Disallow: /do
Pillott
7 мар 2013 г., 13:33
Enter нажат, к чему теперь рыданья…
Lestat, ну автору наверное глаза мозолит .gif)
Screamer
7 мар 2013 г., 13:38
if (preg_match('/ahrefs/i', core::$user_agent)) {
die('Access closed');
}как то так
Всего: 17
© 2024, JohnCMS