Eu tentei isso há dois anos. Eu lembro que tive mais sorte com pulseaudio
do que com esound
(que já não estava ativamente desenvolvido), é muito mais configurável (e muito mais complexo!) ... ainda estava mal trabalhando (sem compressão de fluxo e meu uplink não foi muito bom). Não me lembro dos detalhes dessa configuração agora.
Agora o pulseaudio
parece oferecer suporte a mais protocolos (o RTP parece promissor, já que ele deve lidar com os pacotes corretamente), por isso pode (ou não) funcionar melhor.