hallo
ich hab durch meine logfiles festgestellt, das, wie eingestellt alle 14 tage unmengen an robots vorbeikommen. zum einen stört das, weil ich für eine woche nicht sehen kann wie viele leute da waren, sondern utobie zahlen bekommen. andererseid frage ich mich:
was ist ein "normaler wert", in welchem interwall sollen sie aufkreuzen?
wenn ich meine index.html mit 30 tage versehe, dann werden doch alle dateien die mit link zu erreichen sind durchsucht, auch wenn da nichts mehr steht von wegen 30 tage oder so, oder?
wenn ich über die index und den links meine seite durchsuchen lass, kann ich auf einer gelinkten seite sagen, stop, bis hier her?
ich wäre dankbar, wenn ich heir ein paar tips, egal welcher art erhalten würde, ich hab da echt keinen plan von, auser was bei dr.web steht.