Reiner: Web-Bots

Beitrag lesen

Achso,
das Ding liegt startbereit auf meinem Rechner.
Ist aber im Moment nicht sehr unterhaltsam.
D.h. Du kannst da einen URL reinwerfen, der untersucht werden soll.
Wenn er Fehler findet, kannst Du mal nachsehen. Wenn er nichts findet, tut er so, als hätte er den URL nie untersucht...

Das ist nur zur Demo, man kann aus dem Kern mittlerweile ratzfatz eine Volltext bzw. Metatag-Suche bauen, nach Fehlern (4xx, 5xx...) suchen bzw. Bäume (wer linkt wen?) bauen.

Aber ich will da hier gar nicht näher drauf eingehen. Als ich das hier vor ein paar Monaten genacht habe, kamen so lapidare Dinge wie: "Das gibt es doch schon....blablabla".

Reiner