Pergunta antiga, mas acabei de me deparar com um problema semelhante, pelo que pensei em responder.
O problema é provavelmente devido à modelagem de tráfego no seu ISP. Eles priorizam agressivamente o tráfego para provedores de conteúdo conhecidos, em um esforço para fornecer um melhor serviço de streaming aos clientes. Eu diria que eles foram um pouco longe demais em alguns casos - eu apenas diagnostiquei um problema semelhante, onde um upload de fotos em segundo plano do iCloud estava causando tempos de ping acima de 45.000 ms.
Para resolver o problema, você pode simplesmente reduzir a quantidade de largura de banda total que seu computador usará para impedir que a modelagem de tráfego do ISP roube completamente a largura de banda de todos os outros aplicativos. Ironicamente, isso melhorará o desempenho da navegação em seu próprio computador, além de obviamente melhorar o desempenho de outros computadores em sua rede. Se, por exemplo, você tiver um limite de downstream de 15 Mbps, poderá limitar seu computador a usar apenas 12Mbps dele, e o algoritmo do provedor de serviços de Internet não verá mais a necessidade de moldar seu tráfego de forma tão agressiva:
sudo ipfw pipe 1 config bw 12Mbits/s
sudo ipfw add 1 pipe 1 tcp from any to me
No meu caso, foi a largura de banda de upstream (limitada a 1Mbps pelo meu ISP) que foi o fator limitante, por isso executei o seguinte, que resolveu o meu problema:
sudo ipfw pipe 1 config bw 768Kbits/s
sudo ipfw add 1 pipe 1 tcp from me to any
Observe que esses comandos só serão eficazes até a reinicialização, mas, para cancelar a regra, faça o seguinte:
ipfw delete 1