Don: robots.txt

Beitrag lesen

Hi,

Das wäre für die Index.html dann

<meta name="robots"content="index,nofollow">

und für die restlichen Seiten

<meta name="robots"content="noindex,nofollow">

Da fehlt noch ein Leerzeichen vor "content".
Und das würde wirklich nur noch die Index.html zulassen und alle anderen, von dort aus verlinkten Seiten aussperren. Willst du das wirklich?

Ach so, ich dachte wenn man eine robots.txt verwendet bräuchte man
diese meta-angaben dann gar nicht. Kann man diese weglassen?

Ja. Die Robots indizieren und verfolgen dann alles, was sie von Index.html aus finden, sofern es nicht in robots.txt ausgeschlossen wurde.

Don