Finalmente resolvido. Eu tinha um conector de alto-falante em uma porta que estava funcionando, mas tecnicamente não era na verdade a "porta certa" e, devido à maneira como o pulseaudio detecta o status de saída de linha, isso fazia com que os alto-falantes fossem desconectados.