Hallo zusammen,
ich habe eine Frage:
Mit Hilfe der robots.txt ist es ja möglich, bestimmte Seiten von der Indexierung auszuschließen. So weit, so gut.
Was passiert aber mit weiterführenden Links auf diesen Seiten??? Ignoriert der Robot (insbesondere der Googlebot) diese dann auch vollständig oder verfolgt er die Links trotzdem weiter und indiziert die weiteren gefundenen Seiten dann auch?
Vielen Dank für Eure Hilfe
nicht angemeldet