suit: Robots, GurgelBot ...

Beitrag lesen

Was könnte ich machen? Was hat sich denn geändert? Vor 2-3 Jahren hats ja auch so schön geklappert ...

Vielleich solltest du mal neuen Inhalt schreiben - sich zwei bis drei Jahre nicht verändernder Inhalt wäre für mich ein Indiz für verwaisten Inhalt.

Das alter muss nicht notwendigerweise bedeuten, dass er schlecht ist - aber irgend eine Errata oder Ergänzung gibt es fast überall mal.

Hilft die Robots.txt im Hauptverzeichnis denn überhaupt irgendwas? User-agent: * Allow: /

Der Robots-Exlusion-Standard ist eine so genannte "explicit deny"-Liste - da muss man nicht vorher etwas freigeben. Es schadet aber augenscheinlich auch nicht.

Was hab ich früher gelesen und gelernt! Schallhornbibel etc. Gilt davon nichts mehr?

Schallhornbibel hört sich jetzt irgendwie esotherisch an - in richtung Snake Oil oder Homöopathie.