User-agent: *
Disallow: /mcb/ord/

User-agent: Slurp
Disallow: /mcb/ord/
Crawl-delay: 60

User-agent: discobot
Disallow: /

# zuviele requests, macht interchange langsam (cpu load > 3)
# scheint meist im bulk zu kommen, gibt keine public seite mit suchformular
# ist fuer eigene nutzung gedacht. daher nicht zielgruppenrelevant
User-agent: yacybot
Disallow: /