User-agent: * # All other spiders should avoid Disallow: /cgi-bin/ # Script files Disallow: /ordner1/ # Nicht durchsuchen Ordner Disallow: /ornder2/pdfBuch1.pdf # Nicht durchsuchen Datei