nicht angemeldet
Hallo!
hallo
Ich habe mich bei SelfHTML im Archiv kundig gemacht wie eine Robot.txt ausschauen sollte![1] Leider verstehe ich so einiges nicht!
das macht ja nichts aber warum fragst du dann dinge die du angeblich schon verstanden hast?[1]
Frage:
Wie mus eine Robot.txt aussehen wenn alle Suchmaschinen zugelassen werden sollen.[1]
Und - nur textdateien nicht indexiert werden sollen!
... da musst du glaube ich alle text-dateien in ein verzeichnis packen und dieses dann mit Disallow: pfad/zu/deinen/txtdateien
sperren ... steht übrigens auch unter [1] :-)
Gruss
Dirk
cu
ulli