MudGuard: robots.text - auch mit utf-8 möglich?

Beitrag lesen

SELF-Forum

robots.text - auch mit utf-8 möglich?

MudGuard Homepage des Autors
– Informationen zu den Bewertungsregeln

Hi,

Andererseits enthält eine robots.txt sowieso nur User-Agents und URLs, und ansonsten nur Keywords in englischer Sprache, so dass es sowieso keinen Unterschied macht, ob "nur" ASCII oder UTF-8 benutzt wird, weil sowieso keine Zeichen mit Unicode-Codepoints größer als 127 auftreten.

es sei denn, man verwendet eine BOM.

cu,
Andreas

--
Warum nennt sich Andreas hier MudGuard?
O o ostern ...
Fachfragen unaufgefordert per E-Mail halte ich für unverschämt und werde entsprechende E-Mails nicht beantworten. Für Fachfragen ist das Forum da.
Beitrag melden
–
Informationen zu den Bewertungsregeln