User-agent: bingbot
Crawl-delay: 30 # задает таймаут в 30 секунд

User-agent: PetalBot
Crawl-delay: 40 # задает таймаут в 40 секунд 

User-agent: Applebot
Crawl-delay: 10 # задает таймаут в 10 секунд 

User-agent: *
Disallow: /application/
Disallow: /download/
Disallow: /go/
Disallow: /feedback?
Disallow: /payment/
Disallow: /print/
Disallow: /seo/
Disallow: /web/uploads/
Disallow: /conference/edit?*$
Disallow: /frontend_dev.php
Disallow: /list/search*
Disallow: /search?
Disallow: /list?
Disallow: /info/*?*$
Allow: /
Allow: /info/
Allow: /list?deadlineForRequest=1

Sitemap: https://konferencii.ru/web/sitemap/sitemapindex.xml
Host: https://konferencii.ru