Parece que ativar o módulo de cancelamento de eco no pulseaudio causou esse comportamento "alternado". Desativar o módulo de /etc/pulse/default.pa resolve o problema.
O filtro de cancelamento de eco, carregado em pulseaudio adicionando módulo de módulo de carga-cancelamento de eco na seção de carregamento do módulo, é um filtro que fornece mais eco e cancelamento de ruído para dispositivos de entrada. No entanto, é conhecido por causar bugs.