Hallo Patrick,
Leider werden die Zugriffe, bzw. Versuche dennoch in den Logfiles protokolliert oder? Wenn der Bot-Progger seine Ergebnisse nicht studiert (siehe weiter unten eine meiner Antworten an Tom), werden die Logs statt 405 nun voller 403er sein, aber dennoch aufgebläht bis zum geht nicht mehr!
Wenn er tatsächlich nur Links folgt, wird er dann aber keine Links zum folgen haben, sodass er auch nichts mehr abruft. Du könntest natürlich auch auf einer tieferen Ebene filtern, das würde das Problem auch beheben.
Schöne Grüße,
Johannes