Você pode tentar uma solução alternativa e ver se consegue melhores gravações.
Primeiro abra um terminal (CTRL + ALT + T) e aplique o seguinte comando
arecord --list-devices
O resultado deve ser algo como isto
**** List of CAPTURE Hardware Devices ****
card 0: MID [HDA Intel MID], device 0: ALC272X Analog [ALC272X Analog]
Subdevices: 1/1
Subdevice #0: subdevice #0
Acima estão meus resultados. Então, minha placa de som é hw: 0,0
Agora, aplique o seguinte comando
arecord -f dat -r 60000 -D hw:0,0 -d 5 test.wav
e preste atenção em um resultado específico, aqui estão meus resultados
Recording WAVE 'test.wav' : Signed 16 bit Little Endian, Rate 60000 Hz, Stereo
Warning: rate is not accurate (requested = 60000Hz, got = 48000Hz)
please, try the plug plugin
Nós somos interessantes para o got = 48000 aqui. O número pode ser diferente.
Agora veja quanto é a taxa de amostragem em pulseaudio
cat /etc/pulse/daemon.conf|grep sample-rate
Resultado
; default-sample-rate = 44100
significa que não é o apropriado.
Altere-o com o comando abaixo para o valor apropriado (neste caso, 48000)
sudo sed 's/; default-sample-rate = 44100/default-sample-rate = 48000/g' -i /etc/pulse/daemon.conf
Agora veja novamente o resultado
cat /etc/pulse/daemon.conf|grep sample-rate
deve ser
default-sample-rate = 48000
Reinicie o seu PC e volte a testar a gravação de som.
Se acima da solução alternativa não corrigir o problema, talvez você devesse considerar comprar um microfone USB externo
OR
use um programa como audácia para remover o ruído de fundo. Aqui está um PPA para audácia - Ubuntu