(SEARCHENGINE) robots.txt ?? Was ist den das?

[fjh]

Hi,

Immer wieder lese ich was über robots.txt. Das soll mit Searchengines zu tun haben. Nur habe ich bisher nirgends eine deutsche gute Doku über diese Datei gefunden.

Kann mir jemand weiterhelfen.

vielleicht hilft dir das:

http://www.bjoernsworld.de/suchmaschinen/robots-txt

Griß
Franz