Mach einfach jeden Tag von 03:00 bis 03:15 CE[S]T aus. Wenn die Fritzbox regelmäßig wochenlang durchhält, dann wird ein Ausfall binnen 24h sehr selten sein.
Alternative: Verlege den VPN-Server aus der Fritzbox auf einen Raspi. Dazu musst Du eine Portfreigabe auf der Fritzbox einrichten… Hängt der Raspi dann hinter einer Fritz-Steckdose kannst Du ihn im Smart-Home-Bereich aus- und einschalten - falls das notwendig sein sollte.