nicht angemeldet
robots.txt ??
Hallo miteinander.
In meinem error_log vom Apache 1.3.6 Server findet sich immer wieder der Eintrag, daß eine robots.txt im Server Root Directory nicht gefunden wurde. Auf meinen Webpages befindet sich afaik aber kein link auf diese Datei (weil keine existiert).
Die Aufrufe kommen recht unregelmäßig und von verschiedenen IPs. Weiß jemand zufällig, was es damit auf sich hat?
Danke!
Dominique
-
Hat sich erledigt, danke!
Hallo miteinander.
In meinem error_log vom Apache 1.3.6 Server findet sich immer wieder der Eintrag, daß eine robots.txt im Server Root Directory nicht gefunden wurde. Auf meinen Webpages befindet sich afaik aber kein link auf diese Datei (weil keine existiert).
Die Aufrufe kommen recht unregelmäßig und von verschiedenen IPs. Weiß jemand zufällig, was es damit auf sich hat?Danke!
Dominique