Opção 1 : verifique se sua conexão passa por um proxy ISP.
Put in Google "What is my ip", choose one of the thousands similar webs and look where it says "Proxy Detected:". Repeat the same with your friend connection.
Opção 2 : tente um traceroute para o jogo do servidor.
For this open a prompt and type:
Linux -> "traceroute [put_here_ip_server]"
Windows -> "tracert [put_here_ip_server]"
Compare both traceroutes.
Se você tiver um endereço IP dinâmico, poderá tentar reinicializar seu roteador para obter um novo IP e, esperamos, uma rota melhor para o servidor.
No entanto, a melhor opção será sempre contratar o FTTH (Fiber To The Home) para reduzir a latência da linha.