Verwendung der Datei robots.txt

[Konrad]

Hallo,
danke für die Info, aber:

Gilt dies nur für Dateien/Verzeichnisse im Root-Verzeichnis oder auch z.B. für die Datei /Reisen/Karibik/default.pdf?

Beginnt "/Reisen/Karibik/default.pdf" mit "/default"? Nein.

Wenn Du alle Reisen "schützen" möchtest, schreib "/Reisen" in die robots.txt. Wenn Du nur Karibik-Reisen "schützen" möchtest, schreib "/Reisen/Karibik" in die robots.txt.

Alle Reisen?
Auch "/Angebote/Reisen"?
Um in Deinen Worten zu schreiben:
Beginnt "/Angebote/Reisen" mit "/Reisen"? Nein