nicht angemeldet
Hi Alex,
Wenn du gewisse Teile deiner Webseite für Suchmaschienen Sperren willst, kannst du diese recht einfach mit einer Robots.txt siehe http://de.selfhtml.org/diverses/robots.htm
Ist aber nicht unbedingt gesagt, dass sich der Bot auch daran hält ;-).
Meistens steht im Agent doch eine Webadresse einfach da beschweren?
Hat der Bot denn immer den selben User Agent? Dann würde ich den einfach via htaccess aussperren.
Gute Idee, nur wenn htaccess nicht verfürbar ist? Ich hatte mal das Problem