Eu finalmente encontrei uma solução para isso, demorei um pouco para encontrar, então eu postei aqui, caso isso possa ajudar os outros.
Edite o arquivo:
/etc/pulse/default.pa
Procure a linha:
load-module module-udev-detect
E mude para:
load-module module-udev-detect ignore_dB=1