Michael Schröpl: web.archive.org - robots.txt blockiert Zugriff, warum?

Beitrag lesen

Hi Phil,

Und was für einen User-Agent nutzt web.archive.org? Ich mein, wenn der da rumzickt?!

läßt Du solche Informationen etwa nicht von Deinem Webserver-Log erfassen?

Viele Grüße
      Michael

--
T'Pol: I apologize if I acted inappropriately.
V'Lar: Not at all. In fact, your bluntness made me reconsider some of my positions. Much as it has now.