Botaufrufe einhegen

[Der Martin]

Hallo,

... GoogleBot.

Denn kann man doch in der Statistik sehr gut herausfiltern, weil der sich als solcher zu erkennen gibt.

im Prinzip ja. Ich habe aber auch schon gelesen, dass Google sowohl mit dem klar erkennbaren Bot crawlt, als auch mit Incognito-Bots, um festzustellen, ob Suchmaschinen eine Extrawurst bekommen.

Was ist denn dein eigentliches Problem? Dir kann es doch erst einmal gleichgültig sein, wie deine Seiten von Bots aufgerufen werden, sofern sie keinen Schaden anrichten (können).

Naja, wenn Bot-Abfragen die Mehrheit der Requests ausmachen, bedeutet das, dass dafür viel Bandbreite und Server-Leistung draufgeht. Vielleicht möchte man das nicht.

Ciao,
 Martin