User-agent: *
Disallow: /

User-agent: Googlebot
User-agent: msnbot
User-agent: Slurp
Disallow:
#  Auslesegeschwindigkeit 
Crawl-delay: 10

# Angabe der Sitemap ist Agent-unabhaengig
Sitemap: http://www.dwd.de/sitemap_kurzadressen.xml
Sitemap: http://www.dwd.de/sitemap.xml