Daniel Thoma: Passwortschutz und Google

Beitrag lesen

Hallo Jan,

die meisten Inhalte auf meiner Website stehen unter Passwortschutz mit .htaccess und werden nur Besuchern zugänglich gemacht, die sich registrieren. Gibt es eine Möglichkeit, den Google-Spider dazu zu bewegen, auch die geschützten Inhalte zu indizieren? Z.B. über einen automatischen Log-In über die IP-Adresse?

Es geht mittels des User-Agent-Headers. Da steht irgendwas von Googlebot drin. Allein mittels Serverkonfiguration wird sich das aber vermutlich nicht erreichen lassen. Dieses Vorgehen verstößt aber gegen die Google-Richtlinien. Außerdem kann sich natürlich jeder als Google-Bot ausgeben, wenn er das durchschaut.

Warum willst Du das denn tun?
Weiter unten gibt es eine längere Diskussion darüber, was von solchen Strategien zu halten ist.
Einige verteidigen das vermeintliche Recht des Betreibers, so etwas zu tun. Im großen und ganzen wird es aber zumindest für nicht wünschenswert und auch für den Betreiber als nachteilig gehalten, da die Vorgehensweise Besucher abschreckt.

Grüße

Daniel