Besucher mit russischen Referer sperren

[Der Martin]

Hallo,

Sperrt vieleicht eine robots.txt auch das Programm wget aus?

wohl kaum, denn die robots.txt ist eine gewöhnliche Textdatei, die vom Client explizit angefordert, abgeholt und interpretiert werden muss. Anständige Bots tun das, aber wget fragt direkt die angegebene URL ab. Eine eventuell existierende robots.txt bliebe wirkungslos.

Ciao,
 Martin