В теме одно сообщение

[mam]

Добрый день!

Подскажите пожалуйста о файле robot.txt?
Что с ним делать?
Основные команды?
Может быть какие то особенности именно в нашем случае?

Думаю многим будет полезно.


Заранее благодарю, Mam!

[support]

Работает файл стандартно, как и на любом другом сайте. Вот подробное описание как он работает:
http://robotstxt.org.ru/