Primeiro, eu tentaria verificar sua conexão sem fio. Você diz que o sinal não é um problema, mas parece exatamente assim, como se você tivesse alguma conexão sem fio instável.
Para ter certeza, tente fazer o ping do seu roteador diretamente. Desta forma, seus testes não serão poluídos por congestionamento acidental no seu lado da Internet. Se você ainda vê uma diferença significativa (você também pode verificar o painel de administração acessado através de LAN / Wi-Fi), então a conexão sem fio é a culpa, e você pode depurar mais. As opções mais prováveis são a qualidade ruim do sinal ou o conflito de configurações, mas você teria que fornecer uma visão geral mais detalhada da sua configuração.
EDITAR:
Ah, eu não vi o comentário do laurent-rpnet até o momento da escrita.