Jörg Reinholz: robot.txt

Beitrag lesen

Moin!

Stimmt diese Aussage oder ist es doch irgendwie möglich einzelne Bereich einer Seite z.B. alles was innerhalb von <div id=“kontakt“></div> liegt nicht zu übermitteln?

Einige Webseiten verwenden einen "Spoiler", genau genommen einen Button bei dem auf einen Klick hin die Information mit Javascript geladen (woher auch immer, XHR-Request wäre eine Möglichkeit) und angezeigt wird.

Ob das freilich dem Google-(oder einem anderen Bots) standhält lässt sich von außenstehenden weder für den aktuellen Zeitpunkt noch für die Zukunft zuverlässig behaupten. Der Google-Bot kann nämlich durchaus Javascript und die Bildersuche sicherlich auch OCR ...

Jörg Reinholz