Self-Nachtwächter: robot.txt

Beitrag lesen

würde google und alle anderen aufhören meine übungspass Seiten zu googeln?

Manche schon. Aber selbst Google hat mir neulich als Problem mit meiner Seite gemeldet, dass Google eine Seite indexiert habe, die laut robots.txt verboten sei.

Ich bin mir unsicher wie und warum das passieren konnte. Die "Sperre" bestand von Anfang an.

Aber im Prinzip stimmt das schon.

0 77

robot.txt

jeannie61
  • html
  1. 0
    Self-Nachtwächter
    1. 0
      Matthias Apsel
    2. 0
      jeannie61
      1. 0
        Matthias Apsel
        • suchmaschinen
      2. 0
        pl
    3. 0

      robot.txt +<META NAME="ROBOTS" CONTENT="NOINDEX">

      ursus contionabundo
  2. 0
    pl
    1. 0
      Matthias Apsel
      • sonstiges
  3. 0
    Rolf B
    1. 0
      pl
    2. 0
      jeannie61
      1. 0
        pl
        1. 0
          Rolf B
          1. 0
            pl
            1. 0
              Rolf B
              1. 0
                Matthias Apsel
              2. 0
                Christian Kruse
                1. 0
                  Rolf B
                  1. 0
                    Christian Kruse
                    1. 0
                      Tabellenkalk
                      • zur info
                      1. 0
                        Christian Kruse
                        1. 0
                          Rolf B
                          1. 0
                            Christian Kruse
              3. 0
                pl
                1. 0
                  Rolf B
                  1. 0
                    pl
                2. 0
                  Rolf B
          2. 0
            jeannie61
            1. 0
              Rolf B
              1. 0
                jeannie61
                1. 0
                  Rolf B
                  1. 0
                    jeannie61
                    1. 0
                      pl
            2. 0
              pl
              1. 0
                jeannie61
                1. 0
                  pl
                  1. 0
                    Jeannie
                    1. 0
                      pl
                      1. 0
                        jeannie61
                        1. 0
                          pl
                      2. 0
                        Rolf B
                        1. 0
                          pl
                          1. 0
                            Rolf B
                            1. 0
                              jeannie61
                              1. 0
                                Matthias Apsel
                                1. 0
                                  jeannie61
                                  1. 0
                                    Matthias Apsel
                                    1. 0
                                      Jeannie
                                      1. 0
                                        Rolf B
                                        1. 0
                                          jeannie61
                                          1. 0
                                            Matthias Apsel
                                            1. 0
                                              jeannie61
                                            2. 0
                                              Auge
                                              • webserver
                                              1. 0
                                                Matthias Apsel
                                              2. 0
                                                Matthias Apsel
                                                1. 0
                                                  Auge
                                                2. 0
                                                  Rolf B
  4. 0
    MudGuard
    • webserver
    1. 0
      Tabellenkalk
      1. 0
        Matthias Apsel
        • humor
        1. 0
          Tabellenkalk
          1. 0
            jeannie61
            1. 0
              Matthias Apsel
              1. 0
                jeannie61
                1. 0
                  Matthias Apsel
                  • sonstiges
                  1. 0
                    jeannie61
                  2. 0
                    Christian Kruse
                    1. 0
                      Matthias Apsel
                2. 0
                  jeannie61
                  1. 0
                    Tabellenkalk
                    • rechtschreibung
                    • sprache
                    1. 0
                      jeannie61
                      1. 0
                        Matthias Apsel
                        1. 0
                          jeannie61
                          1. 0
                            Matthias Apsel
                            1. 0
                              Rolf B
                              1. 0
                                MudGuard