Hi @all,
ich habe folgende ROBOTS.TXT:
User-agent: Googlebot
Allow: /
Disallow: /intern/
Disallow: /privat/
Disallow: /bilder/
User-agent: *
Disallow: /
Mein Ziel: Nur die Suchmaschine Gogle soll meine Seite listen dürfen (wobei spezeille Bereiche gesperrt sein sollen)
Ich habe vor über 2 Monaten meine Seite bei Google angemeldet. Aber sie ist immer noch nicht in Google gelistet. Seltsamerweise ist sie zeitweise (aber sehr selten!) auffindbar, dann aber immer nur die Startseite und nicht die Unterseiten.
Habe ich etwas in der ROBOTS.TXT falsch gemacht?
mfg Carsten