robots.txt каким должен быть?
503
KaNapizZ
21 окт 2012 г., 13:13
Люди, читал статьи разные на эту тему но не вьехал. Пожалуйста, дайте мне готовый файл без запрета на что либо. И кто может обьяснить, как сайтмап.хмл делать.
Fublin
21 окт 2012 г., 13:15
KaNapizZ, в джонеесть файл тм что написанно то рарешено для индексации
KaNapizZ
21 окт 2012 г., 13:24
Fublin (21.10.2012 / 13:15)Только что искал не нашел
KaNapizZ, в джонеесть файл тм что написанно то рарешено для индексации
OtherWorld
21 окт 2012 г., 14:40
KaNapizZ, Вот стандартный robots.txt джона
Прикрепленные файлы:
442
(0.10 KB)
сeнсор
21 окт 2012 г., 14:42
КЕК
Есть специальный сервис, он сам сам все делает, ты только адрес свой пишешь...
OtherWorld
21 окт 2012 г., 15:28
"Очень важно запомнить
главное - файл robots .txt ничего не разрешает , а только запрещает!!!" т.е. получается что строка "Allow: /" лишняя.gif)
главное - файл robots .txt ничего не разрешает , а только запрещает!!!" т.е. получается что строка "Allow: /" лишняя
Fublin
21 окт 2012 г., 15:35
OtherWorld (21.10.2012 / 15:28)нужна..птому что например мы разремаем читать директорию, но запрещаем читаь в ней что то, например ид=54?до=5
"Очень важно запомнить
главное - файл robots .txt ничего не разрешает , а только запрещает!!!" т.е. получается что строка "Allow: /" лишняя
OtherWorld
21 окт 2012 г., 15:53
Fublin, Т.е. если не написать "Allow: /" сайт не будет индексироватся? Так получается?
Krite
21 окт 2012 г., 16:46
Fublin (21.10.2012 / 15:35)Ты не прав.
нужна..птому что например мы разремаем читать директорию, но запрещаем читаь в ней что то, например ид=54?до=5
Allow: / - разрешает индексировать все
Так что все, что написано в Disallow будит проиндексировано
Всего: 15
© 2025, JohnCMS