# robots.txt fuer http://www.construct-consult.net/ # robots.txt fuer http://www.construct-consult.de/. # robots.txt fuer http://www.2cons.de/. User-agent: wget User-agent: webzip User-agent: webmirror User-agent: webcopy Disallow: /cgi-bin/ # Massendownloader vom CGI Verzeichnis fernhalten User-agent: / Disallow: /bilder/ # Bilder nicht downloaden