hallihallo!
Tag!
User-agent: *
Disallow: /
allow: /web/
allow: index.htm
allow: index.html
Kennst Du http://selfhtml.teamone.de/diverses/robots.htm#speicherort_aufbau?
Zur Sicherheit solltest Du 'Allow' schreiben. in Perl wird Groß- und Kleinschreibung unterschieden - möglicherweise prüft das nicht jeder...
Ich verstehe das mal so, dass es für alle Dateien, mit Namen "index.htm" - egal in welchem Ordner - laufen soll? (Wenn nicht, dann schreib "/index.htm"). Ob das so läuft ist auch zweifelhaft...
bye
ich