Jens Holzkämper: robots.txt korrektes Listen d. Verzeichnisse

Beitrag lesen

Tach,

Bin etwas verwirrt. Oder erstellt man für jedes Domaine-Root eine eigene robots.txt?

ja, robots.txt muß per HTTP immer im Root-Verzeichnis der Domain liegen.

mfg
Woodfighter

P.S. Bitte verwende für Beispiele immer eine Domain, die entweder dir gehört oder eine aus RFC 2606 (z.B. example.org).