Wenn ich nicht möchte das auf meiner Seite .txt - Dateien von Suchmaschinen eingelesen werden, ist dann diese Form richtig?
robots.txt zu http://www.meine-seite.de/
User-agent: *
Disallow: .txt*
Danke für die Hilfe!
Falls das so nicht OK ist bitte um Hilfestellung!