# Massendownloader vom CGI Verzeichnis fernhalten User-agent: wget User-agent: webzip User-agent: webmirror User-agent: webcopy Disallow: /cgi-bin/ User-Agent: Googlebot Disallow: /Lemuren User-Agent: Googlebot Disallow: /*.gif$ User-Agent: Googlebot Disallow: /*? # robots.txt fuer http://www.chakim.de/ User-agent: * Disallow: /temp/ # Die Dateien sind sehr kurzlebig Disallow: /logfiles/ # Die ändern sich jeden Tag Disallow: /bilder/ # Bilder nicht downloaden Disallow: /cgi-bin/ # CGI Ausgaben nicht indexieren # robots.txt fuer http://www.chakim.net/ User-agent: * Disallow: /temp/ # Die Dateien sind sehr kurzlebig Disallow: /logfiles/ # Die ändern sich jeden Tag Disallow: /bilder/ # Bilder nicht downloaden Disallow: /cgi-bin/ # CGI Ausgaben nicht indexieren User-agent: Die Blinde Kuh Disallow: / User-agent: Eule-Robot Disallow: /