Sven Rautenberg: Robots.txt - Stimmt meine Erklärung?

Beitrag lesen

:) habe es verstanden. danke dir für die Hilfe.

Die Spider müssen sich aber nicht an diese robots.txt halten. Wenn du Informationen nicht veröffentlichen willst, dann mach einen Paßwortschutz davor - oder laß die Seiten gleich auf deiner Festplatte zuhause.

- Sven Rautenberg