Mahlzeit ...
Ich habe eine kurze Diskussion zum Thema robots.txt geführt.
Frage diesbezüglich war, ob man bei Angaben von z.B. 20 Pfaden und Dateien in Form von "Disallow: /Bla/Bla" ... noch zusätzlich ein "Allow: /" am Anfang oder Ende der robots.txt notwendig ist?
Eure Meinung würde mich interessieren ;)
Gruß,
Zerko