Nixe: endlos URL

Beitrag lesen

Moin,

hab gerade meine Seite auf Fehler geprüft indem ich sie mit WebHttrack heruntergeladen habe und leider ist es wohl so, dass die Seite niemals fertig gespiegelt werden kann, da der Crawler immer weiter macht.
Aktiviert habe ich "JS-Links folgen" und normale Ankerlinks.
Wie finde ich nun auch noch heraus, wie das zustande kommt, denn bei den 0.5Mio Seiten, die bis jetzt gespiegelt wurden, könnte jede dran Schuld sein :(

Gruß