nicht angemeldet
hi,
seit fast zwei Wochen besucht ein ominöser Robot meine Webseite. Und zwar täglich ca. 4000 mal.
Das ist, je nach Projektgröße, recht heftig.
als Useragent liefert er dies mit:
Mozilla/5.0 (Twiceler-0.9 http://www.cuill.com/twiceler/robot.html)Wer kennt diesen Bot und was will er? Die kurze Info, die unter http://www.cuill.com/twiceler/robot.html steht, macht mich auch nicht klüger.
"Twiceler should obey robots.txt."
- mal ausprobiert? Also Bot-Name als User-agent angeben, für den ein Disallow / gültig sein soll?
Wenn das nach ein paar Tagen keine spürbare Besserung bringt - dann halt per mod_rewrite auf den UA-String abfragen, und ihm einen 403 vor'n Latz knallen.
gruß,
wahsaga
--
/voodoo.css:
#GeorgeWBush { position:absolute; bottom:-6ft; }
/voodoo.css:
#GeorgeWBush { position:absolute; bottom:-6ft; }