nicht angemeldet
hallo natascha,
du musst mit der robots.txt arbeiten.
dann einen ordner anlegen, wo alle html seiten drin stehen, die nicht vom spider durchsucht werden sollen
und in der robots. txt schreibst du dann disallow: /ordner
beispiel:
robots.txt zu http://www.mein-name.de/
User-agent: UniservalRobot/1.0
User-agent: mein-Robot
Disallow: /quellen/dtd/
Allow: /quellen/dtd/index.html
User-agent: *
Disallow: /unsinn/
Disallow: /temp/
Disallow: /newsticker.shtml
mehr dazu kannst du im selfhtml-forum nachlesen
Hallo,
hier eine Frage an die Suchmaschinenauskenner:
Ich baue meine Seiten gerne mit Framesets auf, dh. z.B. eine index.html (mit dem Frameset) eine nav.html und eine page.html.
Wie kann ich verhindern das manche Suchmaschinen die einzelnen page- oder nav-Dateien finden? Gefunden werden soll nur die index.html, allerdings sollen die robots auch den Inhalt der page.html bei ihrer Suche berücksichtigen.
Bringt es etwas wenn ich aus den nav- u. page-Dateien sämtliche Metatags entferne?
Vielen Dank im vorraus,
die Natascha