Hi Andreas,
Ich schicke an dieses Perl-Script folgenden Header:
$request = "/cgi-bin/sbu_server.pl";
brauchst Du nicht. Du kannst einfach die Hauptdatei absaugen, parsen
und in einer Schleife alle darin gefundenen Links absaugen.
$strHeader = "GET $request HTTP/1.0\r\n";
$strHeader .= "Host: forum.de.selfhtml.org\r\n";
$strHeader .= "Connection: close\r\n";
$strHeader .= "\r\n";
Wenn Du zudem auch noch "Accept-Encoding: gzip" sendest, bekommst
Du die Daten in gzip-komprimierter Form. Die mußt Du dann natürlich
dekomprimieren - aber es geht um Faktor 5-10 schneller.
(Die Hauptdatei wird um Faktor 10 komprimiert, die Postings weniger gut.)
Viele Grüße
Michael