трасировку надо сделать и посмотреть где и на каких шлюзах повышается пинг до сервера, оттуда делать выводы.