robots.txt - Verfolgung von weiterführenden Links?

[ChrisB]

Hi,

Mit Hilfe der robots.txt ist es ja möglich, bestimmte Seiten von der Indexierung auszuschließen. So weit, so gut.
Was passiert aber mit weiterführenden Links auf diesen Seiten??? Ignoriert der Robot (insbesondere der Googlebot) diese dann auch vollständig

nein. Er erfährt nichts von ihnen, also kann er sie auch nicht ignorieren.

Google "crawled" auch das, was es nicht *indizieren* soll.

MfG ChrisB