Нужно ли закрывать граб от ботов?

299
.
У меня граб новостей на сайте стоит нужно ли закрывать папку от ботов. А то сотни страниц с этого граба проиндексировали которых у меня получается нет
.
Лучше закрывать..
За грабы поисковики банят..
.
Windler, а я не знал
.
Максим
В стельку трезвый
Лучше закрыть. Этим ты избежишь проблем с хостером по поводу нагрузки и страниц левых не будет в поисковиках.
Они индексируются, но под выдачу не попадают всё равно потому что есть оригиналы.
З.Ы. Бан поисковики не дают за грабы.
.
это в роботс надо что прописать вот это Disallow: /граб
.
В стельку трезвый
askar69 (18.04.2011/12:20)
это в роботс надо что прописать вот это Disallow: /граб
да
.
Рыбалка на мамонтов
В роботс.тхт
писать::
Disallow:/game ??
P.S. game это папка с грабером

и все?
.
Falcao, А вопросит знак тож надо чтоли?
.
Рыбалка на мамонтов
Не, нинадо)
посмотри B robots.txt там написано как надо с папкой panel ! - скопируй и вместо panel впиши свое
.
У меня нет роботс сам ща создам и напишу
Всего: 17