robots.txt wird von Google ignoriert

[ad]

Hallo Leute,
worst case - sucht man mit Google nach "Suchbegriff" wird nicht die Seite meines Kunden sondern meine eigene auf Platz 1 angezeigt. Also statt kundeA.org steht kundeA.example.org ganz oben.

Ich stelle Webseiten an denen ich arbeite folgendermaßen online:
www.example.org/kunden/kundeA
Dann erstelle ich die subdomain
kundeA.example.org, die auf obiges Verz. verweist.

Es existiert eine robots.txt im root mit folgendem Inhalt:

User-Agent: *  
Allow: /  
Disallow: /kunden/  
  
User-agent: Googlebot  
Disallow: /*.xml$ 

Also dürfte doch eigentlich kein robot in das Kunden-Verz. reingehen. Mit den Wemastertools von Google kann man das testen. Dort teste ich folgende URL

http://www.example.org/kunden/kundeA/index.php

Ergebnis:
Googlebot: Zugelassen
Googlebot-Mobile: Zugelassen

WARUM? Ich habe jetzt notdürftig meine subdomain kundeA.example.org auf kundeA.org verweisen lassen, so landen die Besucher wenigstens auf der richtigen Seite. Meine Seite lasse ich dagegen gad von Google aus dem Index löschen.
Nur wie kann ich das zukünftig sicher vermeiden?

****

Und warum taucht meine Seite auf Platz eins auf, die Seite vom Kunden (inhaltlich exakt gleich) aber erste auf Seite 3?

Danke und Gruß ad