Christoph Schnauß: Websitebesuche von Bots?

Beitrag lesen

SELF-Forum

Websitebesuche von Bots?

Christoph Schnauß
– Informationen zu den Bewertungsregeln

hallo,

Habt ihr eine Idee, um was es sich bei diesem Bot handeln könnte?
Sind das Suchmaschinen-Bots?

Das ist durchaus möglich. Bei mir sieht das zum Vergleich so aus:
66.196.90.159 - - [01/Oct/2004:13:37:04 +0200] "GET /robots.txt HTTP/1.0" 404 286 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)"
66.196.90.220 - - [01/Oct/2004:13:37:05 +0200] "GET /archiv/32.htm HTTP/1.0" 304 - "-" "Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)"
66.196.90.236 - - [01/Oct/2004:14:27:42 +0200] "GET /archiv/146.htm HTTP/1.0" 304 - "-" "Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)"

Ist es normal, dass Suchmaschinen einen Seite über Wochen im 10 Minuten-Takt indizieren?

10-Minuten-Takt ist nicht so ganz normal, aber zweimal am Tag kann schon vorkommen.

Grüße aus Berlin

Christoph S.

--
mailto:christoph.schnauss@berlin.de
http://www.christoph-schnauss.de
ss:| zu:) ls:& fo:) va:) sh:| rl:|
Beitrag melden
–
Informationen zu den Bewertungsregeln