User-agent: *
Disallow: /bitrix/
Disallow: /admin/
Disallow: /upload/
Disallow: /img/
Disallow: /rss/forum.kz/
Crawl-delay: 8 # задает таймаут в 8 секунд