Генератор robots.txt
User-Agent:
Все боты
Яndex
Google
MSN
AltaVista
Disallow (запрет индексирования):
индексировать всё
запретить всё
/
/..
/cgi-bin
/phpincludes
/css
/js
/images
/mail
Результат
Скопируйте текст и вставте в какой-нибудь текстовый редактор (блокнот). Сохраните файл как "robots.txt" в корневой директории Вашего сайта.
Назад