Reiner: Suchmaschine in Perl möglich?

Beitrag lesen

Hallo,

schönen Dank, genau das wollte ich wissen!!!!

Einfaches Beispiel:
use LWP::Simple;
$seiteninhalt=get("http://www.irgendwas.de/egal.htm");

das ist aber nur der erste Schritt. Wenn es größer werden soll, muß man noch folgendes Bedenken:

  • wie speichere/organisiere ich die Daten (Datenbank?!)
  • wie löst man Links auf und wie bzw. welche verfolgt man
  • wie verhindert man, nicht in Seiten zweimal zu laufen

ein Tip zum letzten Punkt:

http://www.domain.de ist meist mit http://www.domain.de/index.html gleichzusetzen. Ich würde empfehlen, über den Quelltext einen MD5-Schlüssel zu generieren, somit weißt Du, welche Seiten gleich sind, auch wenn der URL verschieden ist!

Reiner