Kann es eventuell besser/einfacher sein zu definieren welche Zeichen nicht mehr zu einem Wort gehören? Ja, definitiv, möglicherweise sind es nur Leerzeichen, Komma, Rautenzeichen und das Stringende.
Nein, es kann einfacher sein, einen neuen Sprachkontext durch eine definierte Start-Zeichenfolge und eine definierte End-Zeichenfolge zu ähm definieren.
Und wie kommt man dazu?
Dann gebe ich die Antwort. Indem man die End-Zeichenfolge mit Hilfe der einen, der anderen oder einer weiteren Methode nach dem Wortende einfügt. Wem schwindlig ist, das liegt am im Kreis drehen.