Moin!
Nun meine Frage:
Kennt jemand den USER-AGENT zu der IP:198.139.155.30, damit ich die robots.txt* entsprechend einrichten kann??? Wie kann man sich sonst vor solchen "GAGA-Engines" schützen?
Wenn das man überhaupt eine Suchmaschine ist. Klingt eher wie ein etwas fehlgeleiteter DoS-Angriff...
Außerdem: Wenn du die IP-Adresse hast, dann sollte in den Logfiles duch auch der User-Agent drinstehen - oder hast du kein "combined"-Format? Das wäre dann schade.
Wenn dich das Vorgehen stört, bleibt eigentlich nichts anderes übrig, als die Adresse komplett von der Nutzung deiner Website auszuschließen. Also entweder im Apache
deny from IP-ADRESSE
konfigurieren, oder noch besser die Adresse gleich an der Firewall sperren.
Die "harmlosere" Methode wäre, diese einzelne IP-Adresse immer auf eine Standardseite umzuleiten, die nicht soviel Performance frißt, also im Idealfall eine kurze HTML-Seite. Da kann man dann Erklärungen draufpacken, warum der Nutzer nix anderes zu sehen kriegt.
Bei richtigen DoS-Angriffen arbeitet man am besten mit seinem Provider zusammen, damit der seine Router entsprechend einrichtet. Dann kommt der böse Datenverkehr garnicht erst ins eigene Netz. Mehr dazu steht übrigend bei http://grc.com - die hatten mal einen DDoS-Angriff, und Steve Gibson hat einen _SEHR_ interessanten Report darüber geschrieben - inklusive einer kompletten Analyse des Tools, welches für den Angriff verwendet wurde. :)
- Sven Rautenberg