# Wollen Sie allen Robots den Zugang zu Ihrer kompletten Site gewähren, so # erstellen Sie keine robots.txt Datei. Allerdings führt dies bei jedem # Robot-Besuch zu einem 404-Fehler in Ihren Logfiles. Wenn Sie das stört, stellen # Sie einfach eine leere robots.txt Datei auf Ihren Webserver. # # User-agent: * Disallow: /__old-test/ Disallow: /_backups/ Disallow: /_js/ Disallow: /_notes/ Disallow: /_privat/ Disallow: /_scripts/ Disallow: /_stats/ Disallow: /cgi-bin/ Disallow: /css/ Disallow: /kunden/ Disallow: /multimedia/ ### Disallow: /pc/ Disallow: /pc/_old_test/ Disallow: /pc/_scripts/ Disallow: /pc/images/ Disallow: /pc/unterlagen/ Disallow: /pre/ Disallow: /Templates/ Disallow: haf.php Disallow: pre.htm Disallow: /shops/telekom-shops.php Disallow: /shops/DSL-Internet-Flatrate/ # ### Google Bildersuche ausschliessen: ### Disallow: /images/