nicht angemeldet
Hallo Alex,
Es gibt kein Allow.
wirklich: http://selfhtml.teamone.de/diverses/robots.htm
diesen Fehler in SELFHTML hast Du bereits gemeldet?
"Benutzen Sie im Zweifelsfall so viel wie möglich die Angabe Disallow:
und so wenig wie möglich die Angabe Allow:. Der Grund ist, dass
Disallow: früher in die Spezifikation der robots.txt aufgenommen
wurde und von mehr Robots verstanden wird als Allow:."
Diese Aussage ist falsch, es gibt afaik keinen populären Robot, der
Allow: versteht.
Deshalb sollte der Hinweis auf Allow: komplett aus SELFHTML raus oder
aber zumindest umformuliert werden.
Viele Grüße,
Stefan