User-agent: StackRambler
Crawl-delay: 4.5 # задает таймаут в 4.5 секунды
Request-rate: 1/5         # загружать не более одной страницы за пять секунд
Disallow: /board/

User-Agent: *
Crawl-delay: 4.5 	# задает таймаут в 4.5 секунды
Request-rate: 1/5         # загружать не более одной страницы за пять секунд
Disallow: /board1/
Disallow: /board/
Disallow: /dkran/
Disallow: /dtali/
Disallow: /dtili/
Disallow: /graf/
Disallow: /kran/
Disallow: /links/
Disallow: /l/
Disallow: /mail/
Disallow: /st/
Disallow: /stch/
Disallow: /tali/
Disallow: /test/
Disallow: /_docs/
Disallow: /_htm/
Disallow: /_php/
Disallow: /_str/
Disallow: /_str_cena/
Disallow: /_str_menu/
Disallow: /_str_meta/
Disallow: /_str_mini/
Disallow: /_str_news/
Disallow: /_BBB/