User-agent: * # Datensatz betrifft alle anderen Spider Disallow: /cgi-bin/ # /cgi-bin/ ist ebenfalls gesperrt Disallow: /W3SVC965/ # hier darf niemand rein Disallow: /_ # alle Seiten mit /_ sind gesperrt Disallow: /_* # alle Seiten mit /_* sind gesperrt