User-Agent: * Disallow: /admin # Alle Dateinamen die mit admin beginnen werden nicht gelesen Disallow: /cgi-bin/ # Alle Dateien und Verzeichnisse innerhalb cgi-bin sind verboten Disallow: /geheim.php # Diese Datei darf nicht durchsucht werden