robots.txt Dateien ausschließen

[Gouvernator]

Hallo Leute!

Mein Problem:

Hab hier dynamische Dateien, die ich mit der robots.txt ausschließen will:

http://www.domain.xy/popup_printdoc.php?products_id=7255
http://www.domain.xy/kategorie-m-50.html?filter_id=387&sort=3a

Es sollen also alle "popup_printdoc.php?irgendwas"-Dateinen und alle Dateien mit "?filter_id=irgendwas&sort=irgendwas" ausgeschlossen werden.

Was muss ich da in der robots.txt eintragen?

 

[Gouvernator]

Weiß das keiner???

 

[Efchen]

Gleich der erste Link in Google war ein Volltreffer!
Mit der Datei robots.txt Seiten vor Robots schützen

 

[Gouvernator]

Das was da steht krieg ich auch noch hin.

Ich will ja nicht nur

http://www.domain.xy/popup_printdoc.php?products_id=7255
http://www.domain.xy/kategorie-m-50.html?filter_id=387&sort=3a

ausschließen, sondern auch diese Dateien für alle anderen Produkte, die haben alle unterschiedliche "products_id"-Nummern sowie "filter_id"-Nummern.

 

[threadi]

IMHO schließt robots.txt Dateien und Verzeichnisse aus. Somit schließt die Angabe einer Datei auch alle möglichen Varianten von Parametern hinter der Datei aus. D.h. in deinem Fall musst Du einfach nur die Datei angeben und schon sind auch alle Parameter hinter den Dateien betroffen.

 

[Efchen]

Das steht ja auch in dem von mir verlinkten Artikel so drin. Gouvernator hat wohl nicht so weit gelesen.

User-agent: *
Disallow: /index
Disallow: /temp/

Würde dazu führen, daß alle Urls die mit /index anfangen nicht indexiert werden, auch z.B. /index.html oder /indexed-files/datei.html statt einfach nur das Verzeichnis /index/, wohingegen bei Disallow: /temp/ wirklich nur die Dateien im Verzeichnis /temp/ ausgeschlossen werden.