nicht angemeldet
Tach,
Du kannst in jedes Verzeichnis eine robots.txt setzen
das kann man zwar, aber wenn ich mich recht entsinne, werden robots.txt immer nur im Rootverzeichnis angefordert, also würden welche in Unterverzeichnissen gar nicht beachtet, da sie nicht gespidert werden. Der Standard spricht auch immer von der /robots.txt, also einer Datei in Root.
also auch in das Verzeichis, das die Subdomain nutzt.
Das funktioniert natürlich, da es ja dann eine Datei /robots.txt ist.
mfg
Woodfighter