Uma maneira possível é colocar na lista negra o driver que está sendo carregado:
sudo nano '/etc/modprobe.d/blacklist'
adicione o nome do driver usando a seguinte sintaxe:
blacklist driver-name
Alternativamente,
Crie um arquivo '/etc/modprobe.d/[modulename].conf' contendo 'blacklist [modulename]'.
Executar depmod -ae
como raiz
Recrie seu initrd com update-initramfs -u
No passado obscuro e distante eu pareço lembrar que você pode fazer isso a partir do Grub - não tenho certeza se isso ainda é aplicável em oneiric mas você poderia tentar como uma de suas opções de inicialização do Grub
modprobe.blacklist=kernel_module