Robbe: Spider Problem

Beitrag lesen

Hallo selfer :],

Ich möchte mit einem irdendeinem Spider-Programm folgendes realisieren:

  • Druchlaufe eine URL und checke alle vorhanden internen Links auf bel. vielen Unterseiten..
  • Dabei soll nur der Title der generierten HTML-Seiten in einer Liste (am besten csv) sowie der Link selber als ein Datensatz in der Datei gespeichert werden.

Kennt da jmd. ein Programm mit dem man dieses Problem realisieren kann - ich wäre euch sehr dankbar - habe den ganzen Tag heut nach so einem Programm gschaut - mit negativem ergebniss :((?

cya =),
Robbe.