Hallo Martin!
Ich vermute, dass ich einfach an einem Einwahlknoten mit suboptimaler Verbindung zur restlichen Welt hänge.
Ja, da scheint der Fall zu sein. Pings auf deutsche Server sollten ohne fastpath 50ms brauchen. Kannst ja versuchen osn.de anzupingen, die stehen in Nürnberg. Das ist für Dich rund 500 km kürzer als bis zu Variomedia in Berlin. (Ja, das macht was aus. In Kupfer beträgt die "Lichtgeschwindigkeit" nur 60% und in Glasfaser auch nur 70-80% der "Lichtgeschwindigkeit" im Vakuum.)
Aber trotzdem machen mir die 5ms bis zu Deinem Router Bauchschmerzen. Ich habe von meinen ältesten Läppi aus mit WLAN(!) zum Access-Point ca. 2..3ms zum Router 3..4ms, per Kabel wie gesagt 1ms. Irgendwas stimmt da nicht.