nicht angemeldet
ps.: die meta tags sind alle in ordnung (zb. robots auf index, follow, revisit-after auf 1 days usw..., ausserdem eine robots.txt, die es erlaubt, die gesamte page zu durchforsten....)
Naja, das mit dem revisit kannst du dir im Prinzip sparen. Das macht der Robot vielleicht eine Woche mit, stellt dann fest, dass sich absolut nichts geändert hat, und kommt dann einfach nur noch selten vorbei.
Und mit einer robots.txt kannst du auch nichts erlauben, damit kannst du nur verbieten. Wenn du also erlauben willst, die gesamte Site zu spidern, dann ist die robots.txt angelegt (um 404 in den Logfiles zu vermeiden), aber komplett leer.