Народ есть какий нибудь сервис для проверки правильности robots.txt на сайте.
Просмотр поста #55873: Как заставить бота прийти на сайт и ...
genauk
© 2026, JohnCMS