Seiten über robots.txt sperren bearbeitet von pl 08.08.2018 09:22 > > sinnvoll ist es z.B., Seiten die ein Passwort erfordern da einzutragen. > > Warum denn das? Weil die ohne Passwort keinen Inhalt rausrücken der indexiert werden könnte. robots.txt also: - Seiten die nicht indexiert werden sollen und - Seiten die nicht indexiert werden können. MfG
Seiten über robots.txt sperren bearbeitet von pl 08.08.2018 09:26 > > sinnvoll ist es z.B., Seiten die ein Passwort erfordern da einzutragen. > > Warum denn das? Weil die ohne Passwort keinen Inhalt rausrücken der indexiert werden könnte.