Как писать robots.txt?
18 мая 2008, 14:48
Автор: 1234ru
Коллеги,
расскажите, пожалуйста, как грамотно составлять файл robots.txt?
Какие стандарты регулируют его синтаксис, какие наиболее важные моменты следует знать?
Какую пользу может принести грамотное применение robots.txt?
расскажите, пожалуйста, как грамотно составлять файл robots.txt?
Какие стандарты регулируют его синтаксис, какие наиболее важные моменты следует знать?
Какую пользу может принести грамотное применение robots.txt?