robots.txt-Vorhandensein feststellen + Google Auswirkungen ?
uliII
- sonstiges
0 Jonathan
Hi,
Google liefert seit ca. 5 Tagen ein falsches Suchergebniss.
Eigentlich ist Google doch schneller? (die Seite wurde entfernt) Eine robots.txt hat doch darauf keinen Einfluss, oder doch?
Und lässt sich einfach herausfinden, ob die fremde Site (um welche es geht) eine robots.txt hat?
Hallo uliII,
Google liefert seit ca. 5 Tagen ein falsches Suchergebniss.
Eigentlich ist Google doch schneller?
Muss nicht sein. Der Googlebot hat keinen Zeitplan, den er einhalten müsste.
Eine robots.txt hat doch darauf keinen Einfluss, oder doch?
Eher nicht.
Und lässt sich einfach herausfinden, ob die fremde Site (um welche es geht) eine robots.txt hat?
Ja. Einfach im Browser aufrufen? Als Beispiel http://amazon.de/robots.txt
Jonathan