suit: robots.txt wird von Google ignoriert

Beitrag lesen

Macht die Reihenfolge einen Unterschied?
Also ist

User-Agent: *
Allow: /
Disallow: /kunden/

etwas anderes wie

User-Agent: *
Disallow: /kunden/
Allow: /

Überschreib ich damit meine eigene Regel?

Es gibt im Robots Exclusion Standard kein "Allow" - das Verhalten ist also, wenn implementiert vom Robot abhängig.

Ein "Allow: /" erscheint mir aber allgemein etwas unsinnig, da ohnehin alles Erlaubt ist, was nicht explizit verboten ist.