nicht angemeldet
Hallo,
ich möchte verhindern, dass meine robots.txt im Browser abgerufen werden kann.
In der .htaccess habe ich folgenden Eintrag definiert:
<Files ~ "\robots.txt$">
order deny,allow
deny from all
</Files>
Nun meine Frage: Verhindere ich dadurch den Zugriff von Spidern auf robots.txt?
Dies möchte ich natürlich nicht!
Ich möchte natürlich, dass die Anweisungen in der robots.txt ausgeführt werden.
Danke im voraus...
Steve