# Zeilen in dieser robots.txt die mit einer "#" versehen sind, werden vom Robot nicht abgearbeitet bzw. ignoriert! # Hier können Sie mit dem "Disallow:" weitere Verzeichnisse direkt schützen # die nicht vom Suchmaschinen-Robots gelistet werden sollen oder indiziert als Eintrag in # der Suchmaschine User-agent: * Disallow: /cgi-bin/ Disallow: /images/ Disallow: /logs/ Disallow: /sexshop/ Disallow: /zusteller/ Disallow: /hotel/ # z.b. Disallow: /mein-nicht-angezeigtes-verzeichnis/ # Hier könnten noch folgende Einschränkungen gemacht werden! # User-agent: Scooter # Disallow: /