User-Agent: * Disallow: /persons Crawl-delay: 2 # задает таймаут в 2 секунды User-agent: Yandex Disallow: /persons Host: www.buhinf.ru Crawl-delay: 2