Als erstes würde ich mal schauen wie die Antwortzeiten des Server im Allgemeinen ausschauen (Ping zB).
Antwort von xxx.xx.xxx.xx: bytes=32 zeit=106ms ttl=48
Antwort von xxx.xx.xxx.xx: bytes=32 zeit=126ms ttl=48
Antwort von xxx.xx.xxx.xx: bytes=32 zeit=140ms ttl=48
Antwort von xxx.xx.xxx.xx: bytes=32 zeit=104ms ttl=48