Hallo,
ich habe eine Frage zur robots.txt-datei. ich möchte drei dateien vom indexieren ausschliessen, nämlich jene, auf denen e-mail-adressen enthalten sind, um zu vermeiden, irgendwann mit spam zugeschüttet zuu werden.
ist die folgende robots.txt korrekt, wenn ich die darin angegebenen html-dateien NICHT indexieren möchte?
robots.txt for musterfirma
Zugriff auf alle Dateien erlauben, ausser
User-agent: *
Disallow: /kontakt.html
Disallow: /impressum.html
Disallow: /formular.html
Gruß,
Hendrik.