Hallo
danke für die umfangreiche Erklärung.
Dann gleich noch ein wenig Lesefutter, das auch gleich deine Frage nach der richtigen Syntax beantwortet. Dass sie so, wie unten geschrieben, falsch ist, hat Struppi ja schon angemerkt. :-)
Zugriffskontrolle für Suchmaschinen mit robots.txt
Gut, und meine Ursprungsfrage bezieht sich auf diese Mehrheit der Robots.
Diese Frage war:
kann ich mit folgender Angabe in robots.txt den Zugriff der Bots auf
a l l e meine Unterverzeichnisse verhindern?Disallow: /*/
Tschö, Auge