# robots.txt fuer http://www.beispiel.de/ User-agent: * Disallow: /Logos/ # Die Dateien sind sehr kurzlebig Disallow: /images/ # Bilder nicht downloaden Disallow: /cgi-bin/ # CGI Ausgaben nicht indexieren #Disallow: /news.html # Die news.html ändert sich täglich