nicht angemeldet
Hi,
es gibt bereits zahlreiche Meta-Suchmaschinen im Netz. Ich möchte auch noch eine basteln - nicht in der Hoffnung, dass meine die allerbeste & -schönste wird, nein, einfach zum Spass.
wollte ich auch mal.
Jetzt aber meine Frage:
Wie beziehen die dztigen Meta-Suchmaschinen ihre Daten und werden da nicht die großen Suchmaschinen bösen, falls das ganze "illegal geliehen" wird?.
Ganz einfach, der Rechner, auf dem das Ding laeuft, tritt permanent als http-Client auf. Dazu nimmst Du ein browseraehnliches Modul aus der Bibliothek Deiner bevorzugten Entwicklungsumgebung. 'Perl' waere z.B. geeignet und nennt das o.g. Ding 'user agent'. 'ASP' von M$ kennt da http-Objekte. 'PHP' und andere serverseitige Logik wird da nicht zurueckstehen.
Das Ding erhaelt dann html-Daten, die es parsen muss, um weitere http-Refereneen zu erhalten. Parallel dazu durchkaemmt es den Code und fuettert seine Datenhaltung.
Gruss,
Lude