MudGuard: URL bei Google entfernen

Beitrag lesen

Hi,

im verlinkten Artikel heißt es: „[Es] besteht auch keinerlei Garantie, dass sich Suchmaschinen an die Verbote in robots.txt halten. Ordentlich programmierte Robots beachten die Datei, aber Robots, die mit bösen Absichten das Web durchsuchen, halten sich vermutlich nicht daran.

Ich könnte mir durchaus vorstellen, daß ein bösartiger Robot sich sehr genau an die Robots.txt hält - ist doch eine tolle Anleitung zum Auffinden der interessanten Sachen ;-)

cu,
Andreas a/k/a MudGuard