User-Agent: *
Crawl-delay: 2
Disallow: /cgi-bin/
Disallow: /dbcmd/
Disallow: /auctions/
# платный доступ к базе аукционов для клиентов компании
Disallow: /refinancing/
# информация только для зарегистрированных пользователей
Disallow: /quotes/market/
# платный доступ к базе
Disallow: /comments/view/
# информация только для зарегистрированных пользователей
Disallow: /emissions/issue/simple/
Disallow: /includes/
Allow: /includes/rss/yandex_rss.php
Disallow: /rklm/stat.php
Disallow: /reklama/stat.php
Disallow: /contact/216309
Disallow: /contact/216309/

User-Agent: Yandex
Crawl-delay: 2
Disallow: /cgi-bin/
Disallow: /dbcmd/
Disallow: /auctions/
# платный доступ к базе аукционов для клиентов компании
Disallow: /refinancing/
# информация только для зарегистрированных пользователей
Disallow: /quotes/market/
# платный доступ к базе
Disallow: /comments/view/
# информация только для зарегистрированных пользователей
Disallow: /emissions/issue/simple/
Disallow: /includes/
Allow: /includes/rss/yandex_rss.php
Disallow: /rklm/stat.php
Disallow: /reklama/stat.php
Disallow: /contact/216309
Disallow: /contact/216309/
Host: cbonds.info

User-Agent: Bingbot
Crawl-delay: 10
Disallow: /dbcmd/
Disallow: /auctions/
Disallow: /refinancing/
Disallow: /quotes/market/
Disallow: /comments/view/
Disallow: /emissions/issue/simple/

User-agent: BLEXBot
Disallow: /

User-agent: MJ12bot
Disallow: /

User-agent: SemrushBot
Disallow: /

User-agent: SemrushBot-SA
Disallow: /

User-agent: dotbot
Disallow: /

User-agent: AhrefsBot
Disallow: /

User-agent: Mail.Ru
Disallow: /

User-agent: sentibot
Disallow: /

User-agent: Riddler
Disallow: /

User-Agent: trendictionbot
Disallow: /

Sitemap: http://cbonds.info/sitemap.xml