Chriz: Indizierte Suche

Hi...

Ich suche nach einer indizierten Suche, die eine gesamte Webseite "ausliest".
Was ich bislang fand, waren Scripte, die Files indizierten, aber nicht die Unterseiten (Links).

Weiss jemand von Euch wo ich sowas finde?

Gruß,
Chriz

  1. Da kannst du noch lange suchen.
    Stell dir mal vor:

    • Unterseite google.de,chip.de usw.

    Bereits nach einer Ebene können es schon Millionen von Seiten sein!

  2. Wenn Du selber halbwegs programmieren kannst, kannst Du Dir ein PHP-Skript schreiben, das rekursiv alle Links der Website durchgeht, prüft, ob sie auf derselben Domain bleiben und nachschaut, ob es die Seite bereits indiziert hat (Damit keine Endlossschleifen entstehen) und die Inhalte entsprechend speichert...

    Das dürfte nicht sehr schwer sein. Fertige Skripts in der Hinsicht habe ich auch schon mal gesehen, die krankten aber alle an irgendwas (z. B. eben die Endlosschleife)