Robot.txt как правильно писать.

Доброго.

Вопрос следующий.
Как правильно написать robot.txt для движка LS.

Контент должен быть полностью открыт, закрыть только функциональные страницы и те что дублируют контент.

С уважением Qusco.

4 комментария

avatar
во первых — robotS.txt
во вторых — livestreet.ru/search/topics/?q=robots.txt
  • Vilz
  • +1
avatar
а вообще нет не какой разницы под какую cms заполняешь robots.txt и какие страницы закрывать личное дело каждого… в ЛС как таковых админок и служебных страниц нет так что можно вообще не чего не закрывать
avatar
Считаю опрометчивым такое предположение.
Переубеждать не буду, создал топик не для того!
avatar
  • dee
  • 0
Только зарегистрированные и авторизованные пользователи могут оставлять комментарии.