# Инструкции для всех роботов

User-agent:   *
Disallow: /cgi-bin/
Disallow: /forum
Disallow: /config.shtml
Disallow: /pdf/

# StackRambler robot 
User-agent: StackRambler (для робота "StackRambler" поисковой системы Rambler) 
Disallow: /cgi-bin/ (запретить индексировать директорию "/cgi-bin"). 
Disallow: /sys/ (запретить индексировать директорию "/sys"). 
Disallow: /pass 
Disallow: /config.shtml (запретить индексировать файл "config.shtml"). 

# Yahoho robot 
User-agent: Yahoho (для робота "Yahoho" поисковой системы Yuhuhu) 
Disallow: /cgi-bin/ (запретить индексировать директорию "/cgi-bin"). 
Disallow: /images/ (запретить индексировать директорию "/images"). 
Disallow: /pass (запретить индексировать файлы имя которых от корневого каталога начинается с "/pass"). 
Disallow: /config.shtml (запретить индексировать файл "config.shtml").