steve: robots.txt nicht im Browser anzeigen lassen

SELF-Forum

robots.txt nicht im Browser anzeigen lassen

steve
– Informationen zu den Bewertungsregeln

Hallo,

ich möchte verhindern, dass meine robots.txt im Browser abgerufen werden kann.

In der .htaccess habe ich folgenden Eintrag definiert:
<Files ~ "\robots.txt$">
order deny,allow
deny from all
</Files>

Nun meine Frage: Verhindere ich dadurch den Zugriff von Spidern auf robots.txt?

Dies möchte ich natürlich nicht!

Ich möchte natürlich, dass die Anweisungen in der robots.txt ausgeführt werden.

Danke im voraus...

Steve

Beitrag melden
–
Informationen zu den Bewertungsregeln

  1. robots.txt nicht im Browser anzeigen lassen

    wahsaga Homepage des Autors
    – Informationen zu den Bewertungsregeln

    hi,

    ich möchte verhindern, dass meine robots.txt im Browser abgerufen werden kann.

    warum?

    In der .htaccess habe ich folgenden Eintrag definiert:
    <Files ~ "\robots.txt$">
    order deny,allow
    deny from all
    </Files>

    Nun meine Frage: Verhindere ich dadurch den Zugriff von Spidern auf robots.txt?

    ja, natürlich.
    ein spider ist client, wie ein browser auch. und da hast gerade allen den zugriff verboten.

    Dies möchte ich natürlich nicht!

    dann lass' es doch einfach.

    gruß,
    wahsaga

    --
    /voodoo.css:
    #GeorgeWBush { position:absolute; bottom:-6ft; }
    Beitrag melden
    –
    Informationen zu den Bewertungsregeln

    1. robots.txt nicht im Browser anzeigen lassen

      steve
      – Informationen zu den Bewertungsregeln

      Hi wahsaga,

      danke für die Info.

      Dann lass ich es auch ;-)

      Bye

      Steve

      Beitrag melden
      –
      Informationen zu den Bewertungsregeln