A resposta curta é não, não há. QoS não fará isso. O problema é simples - sua velocidade de download é determinada por quais pacotes seu ISP coloca no fio para você. Depois de receber um pacote, ele já consumiu a preciosa largura de banda de entrada e é tarde demais para fazer algo a respeito.
Há uma variedade de técnicas que funcionam muito mal com as quais você pode mexer, dependendo do roteador que você está usando. Mas, basicamente, o acesso à Internet em casa não é projetado para isso.
Você pode colocar limites de velocidade de download na máquina que deseja obter com menos velocidade. Mas esse software tende a limitá-lo mesmo quando a largura de banda total está disponível.
Uma coisa que funciona bem, no entanto, é usar um proxy da web como o Squid e configurar todas as máquinas para usá-lo. Você pode fornecer gerenciamento de largura de banda no Squid com pools de retardo. Claro, isso não ajudará se o problema não for o acesso à Web.