Ao contrário de um mito generalizado, saturar a largura de banda com um grande download ou upload deve NUNCA causar um pico de latência para todo o resto. Em caso afirmativo, provavelmente você está encontrando um bug generalizado e conhecido do roteador chamado bufferbloat.
Use o link (nota: este NÃO é o Ookla speedtest.net) para obter o seu grau de bufferbloat. Se você obtiver uma nota ruim, procure habilitar o FQ-CoDel (ou qualquer algoritmo de fila inteligente posterior da comunidade de pesquisa bufferbloat) em seu roteador. Pode ser necessário instalar o firmware de código aberto, como o OpenWrt, no seu roteador para habilitar o FQ-CoDel. Ativar a Notificação de Congestionamento Explícito (ECN) também é útil. Além disso, considere o ajuste da modelagem de tráfego em seu roteador para tornar o seu roteador CoDel um pequeno gargalo para que o FQ-CoDel possa entrar em ação antes que as filas de buffer inchadas se acumulem em qualquer outro lugar.
Ou veja a compra de uma solução pronta para uso, como o IQrouter do EvenRoute.