Suche Hilfe in Bezug auf robots.txt

[Thomas Kerk]

Hallöchen,

kann mich irgendjemand über die Datei robots.txt aufklären.

Wozu brauch ich sie, was macht sie und wie erzeuge ich sie ???

Danke

Thomas