robot.txt

[Matthias Apsel]

Hallo Self-Nachtwächter,

Manche schon. Aber selbst Google hat mir neulich als Problem mit meiner Seite gemeldet, dass Google eine Seite indexiert habe, die laut robots.txt verboten sei.

Du kannst mit der robots.txt kein Verbot aussprechen, nur die freundliche Bitte äußern, bestimmte Ressourcen nicht zu indexieren.

Bis demnächst
Matthias