Theo: Suchmaschinen sperren

Hi Alle,

kann mir einer sagen, wie ich meine Seite für alle Suchmaschinen sperren kann? Ich möchte nicht bei Google und co. erscheinen.

Danke Martin

  1. Hallo Theo,

    für alle Seiten:
    http://de.selfhtml.org/diverses/robots.htm
    für einzelne Seiten:
    http://de.selfhtml.org/html/kopfdaten/meta.htm#robots

    Gruß, Jürgen

    1. Moin Moin!

      für alle Seiten:
      http://de.selfhtml.org/diverses/robots.htm
      für einzelne Seiten:
      http://de.selfhtml.org/html/kopfdaten/meta.htm#robots

      Bleibt anzumerken, dass beides FREIWILLIG ist. Jede ordentliche Suchmaschine hält sich daran, aber eben nicht jede existierende Suchmaschine.

      Gegen unerwünschte Zugriffe helfen nur serverseitige Maßnahmen, z.B. eine Passwort-Abfrage. Das läßt sich bei gängigen Hostern per .htaccess-Datei leicht und einfach einrichten.

      Alexander

      --
      Today I will gladly share my knowledge and experience, for there are no sweeter words than "I told you so".
      1. Hello Alexander,
        hello @all,

        das habe ich noch auf dem Zettel stehen...

        gibt es eigentlich eine mäßig verlässliche Liste der IPs der Suchmaschinen?
        Ich gehe davon aus, dass die meistens über dieselben statischen IPs kommen und nicht über Dial-In-Bereiche von Providern?

        Es würde mir reichen, die wichtigsten zu kennen.

        Harzliche Grüße aus
        Sankt Andreasberg
        und Frohes Neues Jahr

        Tom

        --
        Nur selber lernen macht schlau

        1. hi $name,

          Ich gehe davon aus, dass die meistens über dieselben statischen IPs kommen und nicht über Dial-In-Bereiche von Providern?

          jep

          Es würde mir reichen, die wichtigsten zu kennen.

          66.249.67.44 = google

          74.6.28.145 = yahoo

          65.55.212.46 = msn

          63.123.238.8 = ask

          208.36.144.7 = cuill

          hth

          gruss
          shadow

          --
          The computer made me do it; HONEST!
          1. Hi Shadowcrow, hi Tom,

            aus meinen logs vom 09.01.08 - 0 Uhr

            66.249.67.44 = google

            66.249.65.101 - Googlebot/2.1;
            66.249.66.166 - Googlebot/2.1;
            66.249.66.131 - Googlebot/2.1;
            66.249.66.39  - Googlebot/2.1;

            74.6.28.145 = yahoo

            74.6.28.136 - Yahoo! Slurp;
            74.6.19.114 - Yahoo! Slurp;
            74.6.29.29  - Yahoo! Slurp;
            74.6.28.172 - Yahoo! Slurp;
            74.6.19.122 - Yahoo! Slurp;
            74.6.23.147 - Yahoo! Slurp;
            74.6.19.109 - Yahoo! Slurp;
            74.6.24.147 - Yahoo! Slurp;

            65.55.212.46 = msn

            65.55.208.110 - msnbot/1.0
            65.55.212.73 - msnbot-media/1.0
            65.55.209.201 - msnbot/1.0
            65.55.209.109 - msnbot/1.0

            63.123.238.8 = ask

            208.36.144.7 = cuill

            84.160.178.129 - yacybot
            87.230.25.140 - yacy
            217.93.20.22 - yacybot
            87.122.69.88 - yacybot
            81.169.136.109 - yacybot
            77.176.211.109 - yacybot
            84.60.149.203 - yacybot
            217.93.20.22 - yacybot
            87.230.25.140 - yacybot

            Grüße,
            Engin
             GYRO

        2. Hi,

          gibt es eigentlich eine mäßig verlässliche Liste der IPs der Suchmaschinen?
          Ich gehe davon aus, dass die meistens über dieselben statischen IPs kommen und nicht über Dial-In-Bereiche von Providern?

          Statische IPs ja, aber es sibd deren wirklich sehr viele.
          Allein für Google kenne ich zwei 64er-Bereiche, zwei 66er-Bereiche und einen 216er Bereich, insgesamt sind darin 20.480 IPs.
          Bei Intomi/Yahoo sind es acht Bereiche und bei MSN sieben, wobei hierzu auch ein großer Bereich SPRINTLINK-BLKB gehört.

          freundliche Grüße
          Ingo

  2. kann mir einer sagen, wie ich meine Seite für alle Suchmaschinen sperren kann? Ich möchte nicht bei Google und co. erscheinen.

    Man kann ja auch einfach nichts großartiges in der Richtung
    unternehmen, dann landet man auf Platz 12963 und gut is.