Webseite ohne Passwort "schützen"

[Tommy]

Hallo, dies ist eine Folgefrage zu folgender FAQ:

http://de.selfhtml.org/navigation/faq.htm#passwortschutz

Im letzten Absatz heißt es:

"(...) stellen Sie Seiten unverlinkt ins Netz und teilen Sie nur solchen Personen die Adresse mit, die diese Seiten sehen können sollen. (...) Ein solcher Schutz ist zwar nicht hundertprozentig, aber im Grunde sicherer als alle Versuche, mit einem Passwortformular schon anzudeuten, dass es da noch etwas 'Geheimes' gibt."

Das alles leuchtet mir ein, aber stutzig gemacht hat mich folgender Hinweis:

"Stellen Sie solche Dateien am besten in ein eigenes Verzeichnis ein und legen Sie dann zentral in einer robots.txt fest, dass Suchmaschinen sich auf keinen Fall an Inhalten dieses Verzeichnisses vergreifen."

Meine Frage ist: Wenn ich Seiten *unverlinkt* ins Web stelle, wie könnte irgendein Robot auf die Adresse kommen? Robots folgen doch nur Links, oder habe ich da etwas falsch verstanden?

Hinweis:
Ich habe *nicht* vor, irgendwelche geheimen oder privaten Daten ins Web zu stellen und so zu "schützen" - ich frage nur aus purem Interesse.

Danke für eure Zeit
Tommy