Просмотр поста

Slalex77, спасибо. Это на всех ботов так? Я почему то думал что гугл только в карте сайта sitemap.xml пасется, а на robots.txt не обращает внимания. Дело в том что у меня на сайте была одна папка под запретом индексации, а потом смотрю в эту папку из гугла переход есть, набрал в гугле inurl:название_папки, гугл подлец очень даже хорошо её проиндексировал и ложил он на мой запрет