Naps: Fremde Website crawlen

Beitrag lesen

Schleife ist aber schlecht.
Rekursiv wäre da schon der bessere Ansatz. :-)

Stimmt, ist sicher besser ;)

Und denk dran, auch die Header abzufragen und empfangene Cookies ggf. wieder mitzusenden, damit Dein Script auch das zu sehen bekommt, was ein üblicher Nutzer mit seinem Browser (erstmal ohne Einsatz von JS) zu sehen bekommen würde.

Vergiss auch nicht die im Header verlinkten Dateien, wie z.B. CSS, abzuholen.

In diesem Fall, brauche ich das zum Glück nicht zu beachten, weil es mir nur um einen Teil Website geht, der immer gleich ist.

MfG Naps