nicht angemeldet
Hallo Self-HTML-Team,
wenn ich im head den meta-tag name="robots" content="follow" einfüge, wird der robot auf der aktuellen seite den verweisen zur nächsten seite folgen? was ist aber, wenn auf der nächsten seite dieser meta-tag nicht da ist? wird der robot trotzdem alle dokumente durchsuchen? egal wie weit es in unterorder hineingeht bzw. wie weit verweisen nach unten führen?
beispiel: ich habe nur auf meiner index-seite (mit frame) diesen meta-tag (name="robots" content="follow"). auf dieser seite ist ein link zur hauptseite auf der mehrere links und unterlinks sind jedoch nicht diese meta-information. wird er trotzdem, weil ganz oben "follow" steht, sich bis nach unten durchsuchen und alles in die suchmaschinendatenbank aufnehmen?
Vielen dank im voraus.
MfG Udo