nicht angemeldet
Um alle robots vom crawlen über Deine seite abzuhalten kannst Du folgendes in die robots.txt einfügen:
User-Agent: *
Disallow: /
Um nur den ask-jeeves bot auszusperren mußt Du herausfinden wie der heißt (dürfte in deinem access log stehen), dann ersetzte das Sternchen bei User-Agent durch den Bot.
Viele Grüße
Sasha