hallo,
kann man einzelne links für sumas "ausklammern", damit sie nur die
wichtigen links aufnehmen?
wenn ich z.b. eine seite mit 30 links habe soll sich der spider nicht
unnötig mit allen links "beschäftigen" sondern nur meine 5 wichtigsten
links finden und aufnehmen.
geht sowas, bzw. nimmt er dadurch die 5 schneller auf, als wenn alle
30 links da wären?
ich habe daovn schonmal gelesen, habe aber keine begriff, mit dem ich
hier erneut suchen könnte.
danke
markus