Stefan Einspender: robots.txt

Beitrag lesen

Hallo Dirk,

User-agent: *
Disallow: .txt*

nein, zumindest bei Google kannst Du folgende Schreibweise verwenden:

User-agent: *
Disallow: /*.txt$

Eine andere Möglichkeit ist die von Sönke in ?t=49838&m=272471 ge-
nannte, wenn Dir die Sache mit dem Script zu kompliziert ist, dann
kannst Du ja auch die Textdateien in ein Verzeichnis packen und nur
dieses dann ausschließen:

User-agent: *
Disallow: /textdateien/

Viele Grüße,
Stefan