Что за бот??

Подскажите,что ето за бот.Постояно сканирует мой сайт.

Браузер: Mozilla/5.0 (compatible; AhrefsBot/3.0; +http://ahrefs.com/robot/)
Адрес IP: 213.186.127.11 / 213.186.127.11

Гусеничный Web представляет собой
компьютерную программу, которая
просматривает World Wide Web в
методической, автоматическом
режиме или в порядке. Другие
условия для веб-сканеры муравьев,
автоматический индексаторы, боты,
или веб-пауков, веб-роботов, или,
особенно в FOAF-сообщество веб-
scutters. Этот процесс называется веб-
сканирование или пауков. Гусеничный
Web является одним из видов бота,
или программного агента. В общем,
начинается со списком URL, чтобы
посетить, называют семенами. Как
гусеничных посещает эти URL-адреса,
она определяет все гиперссылки на
странице и добавляет их в список
адресов для посещения, называемый
обхода границы. URL, от границы
рекурсивно посетил в соответствии с
набором политик. User-Agent:
AhrefsBot запретить :/ Как отключить
его? Быстрый способ предотвратить
AhrefsBot посещения вашего сайта,
чтобы поставить эти две строки в
файл / файл robots.txt на сервере:
Читайте о robots.txt
p.s. Googl transleted

в robot.txt заприти и все, а так это бот сайта ahrefs.com Гг

Если нагрузку не создает, то пусть себе сканирует.

Это робот онлайн сервиса

марте 2011 года была запущена в работу бета-версия нового интернет-инструмента http://ahrefs.com для анализа бэклинков, ориентированная, в первую очередь, на сео-специалистов и владельцев интернет-ресурсов.

Особенностью этого инструмента является постоянно обновляемая база данных (около 6 млрд внешних и 25 млрд внутренних ссылок ежедневно) и предоставление данных пользователям в реальном времени. С помощью данного инструмента можно проанализировать и оценить ссылочную массу своего сайта, сравнить ее с другими сайтами. Рейтинг, который показывает Ahrefs, зависит не только от количества ссылок, но и от авторитетности ссылающихся страниц.

Ahrefs хранит информацию о всех найденных ссылках с учетом их авторитетности, типа (do- и no-follow, картинки, текст, редиректы), а также анкоры найденных ссылок и заголовки проиндексированных страниц. Сейчас доступен Site Explorer в котором можно смотреть статистику обратных ссылок для конкретного URL, для папки, для домена, для домена с сабдоменами.

Детальные отчеты (advanced reports) в дальнейшем планируется предоставлять на платной основе.

На данном этапе сервис тестируется и дополняется с учетом пожеланий и предложений оптимизаторов и сео-специалистов. Все желающие приглашаются бесплатно опробовать Site Explorer от Ahrefs. Тем участникам, которые зарегистрируются на этапе тестирования, в дальнейшем будет предоставлена бесплатная возможность попробовать подробные отчеты (когда этот сервис будет запущен)

как его забанить, в инете советуют вписать в робот.тхт вот это:
User-agent: AhrefsBot
Disallow: /

вписал, но он всё равно шуршит...

у меня стандартный робот.тхт от джона

User-agent: *
Disallow: /panel/
Disallow: /download/arctemp/
Disallow: /files/forum/attach/
Allow: /

куда воткнуть выше указанную хрень, чтобы забанить этого бота?

сегодня еще один новенький заходил, по крайней мере раньше я его не видел
Mozilla/5.0 (compatible; Ezooms/1.0; ezooms.bot@gmail.com) 208.115.111.72
Это кто?

это цензура интернета, могут закрыть твой сайт если увидят то тчто запрещено Они дошли и на вап сайты

espo, Чем он тебе мешает?

elkol (07.03.2013 / 10:43)
espo, Чем он тебе мешает?

elkol (07.03.2013 / 10:43)
espo, Чем он тебе мешает?