Stefan Einspender: robotx.txt-Prob!

Beitrag lesen

Hallo Sönke,

Disallow /
  Allow /blabla

was allerdings auch wieder egal ist, da es afaik keinen Robot gibt,
der die Allow-Directive unterstützt.

Viele Grüße,
Stefan

PS: Was Du meinst, ist mir durchaus klar, in der .htaccess geht es
    ähnlich vonstatten.