Архив форумов ЦИТФорума

[Lazzi]

Хотелось бы узнать как указать для поискового роботы в файле robot.txt что ему нужно индексировать файлы с раширением .dat и запретить индексировать файлы с другими расширениями.

Заранее спасибо.

[Dmitry.Karpov http://www.]

Попробуйте http://www.citforum.ru/cgi-bin/yandsearch?text=robots , можно спросить у авторов. Только мне странно - почему поисковики не индексируют файлы.dat и зачем запрещать остальные расширения (ведь ссылки обычно делаются из .html)?