lulu: robots.txt obligatorisch?

Beitrag lesen

SELF-Forum

robots.txt obligatorisch?

lulu Homepage des Autors
+1 Informationen zu den Bewertungsregeln

Huhu

Also ist eine robots.txt obligatorisch bzw. von Vorteil?

zumindest hast Du dann keine (weniger) 404er im Logfile stehen.
Ich lege deshalb auch immer ein favicon an, auch wenn das dann manchmal nur ein Bild von 10 weissen Elefanten die im Schnee spielen ist.

http://www.robotstxt.org/wc/faq.html

Viele Grüße

lulu

--
bythewaythewebsuxgoofflineandenjoytheday
Beitrag melden
+1
Informationen zu den Bewertungsregeln
0 19

robot.txt obligatorisch?

parley
  • projektverwaltung
  1. 1
    Cheatah
    1. 0
      parley
      1. 0
        astelix
    2. -4
      Christoph Schnauß
      1. 0
        Cheatah
      2. 0
        parley
        1. -2
          Christoph Schnauß
  2. 1

    robots.txt obligatorisch?

    lulu
    1. 0
      Christian Kruse
      1. 3
        CarstenP
        1. 0
          Christian Kruse
        2. 1
          Sven Rautenberg
          1. 0
            CarstenP
            1. 1
              Orlando
              1. 0
                CarstenP
  3. -11
    Christoph Schnauß
    1. 11
      Christian Kruse
    2. 2
      Lucas