# Запись «User-agent» должна содержит название поискового робота. User-agent: * означает, что следующие за ней Disallow относятся ко всем роботам, кроме тех, для которых есть свои строки User-agent. User-agent: * # Для индексирования запрещен файл gallery_bigpic.php, находящийся в корневом каталоге и файл user_order.php, располагающийся в директории «memberarea». Disallow: /gallery_bigpic.php Disallow: /memberarea/user_order.php # Для индексирования запрещены директория «memberarea» и всё содержимое данной директории. Disallow: /memberarea/ Disallow: /admin/ # Для индексирования запрещены директория «admin», а так же все файлы и директории, начинающиеся c «admin»: «admin.htm», «adminka.htm», директории: «admin», «admin1» и т.д. Disallow: /admin Disallow: /config