# Alles Erfassen User-Agent: * Disallow: # Ausnahme PDF Erfassung Googlebot User-Agent: Googlebot Disallow: /*pdf$ # Ausnahmen zur Vermeidung von seiteninternem duplicate content bei Google, Yahoo + MSN User-agent: Googlebot Disallow: /index.php?id= User-Agent: Yahoo! Slurp Disallow: /index.php?id= User-Agent: msnbot Disallow: /index.php?id= # gesperrte Domain Bereiche alle Bots User-agent: * Disallow: /typo3/ Disallow: /suche/ Disallow: /fileadmin/ Disallow: /cgi-bin/