Hallo Leute,
worst case - sucht man mit Google nach "Suchbegriff" wird nicht die Seite meines Kunden sondern meine eigene auf Platz 1 angezeigt. Also statt kundeA.org steht kundeA.example.org ganz oben.Ich stelle Webseiten an denen ich arbeite folgendermaßen online:
www.example.org/kunden/kundeA
Dann erstelle ich die subdomain
kundeA.example.org, die auf obiges Verz. verweist.
Was heißt, sie verweist darauf? Offenbar ist der Inhalt unter kundeA.example.org abrufbar.
Es existiert eine robots.txt im root mit folgendem Inhalt:
In welchem root? Existiert eine robots.txt unter www.example.org welche darum bittet /kunden/ nicht zu lesen und/oder existiert eine robots.txt unter kundeA.example.org welche darum bittet /kunden/ nicht zu lesen, ein Verzeichnis welches es dort gar nicht gibt?
Nur wie kann ich das zukünftig sicher vermeiden?
Sicher? Laß niemanden darauf zugreifen den Du nicht zugreifen lassen möchtest.
Aber davon wie sicher das ist abgesehen, wenn man die Indexierung regeln will, dann sollte man die Indexierung regeln, und das macht man nicht mit der robots.txt sondern mit den metatags zur Indexierung.