User-agent: *
Allow: /

User-agent: Mediapartners-Google
Allow: /

User-agent: Googlebot
Allow: /

User-agent: Googlebot-Image
Allow: /

User-agent: Googlebot-Mobile
Disallow: 

User-agent: Adsbot-Google
Disallow:

# Massendownloader vom CGI Verzeichnis fernhalten
User-agent: wget
User-agent: webzip
User-agent: webmirror
User-agent: webcopy
Disallow: /temp/       # Die Dateien sind sehr kurzlebig
Disallow: /logfiles/   # Die ?ndern sich jeden Tag
Disallow: /cgi-bin/    # CGI Ausgaben nicht indexieren

Sitemap: http://www.kfztech.de/sitemap.xml