Alguns compiladores / instaladores da nvidia parecem mexer com os nomes dos módulos da lista negra em /etc/modprobe.d/, então eu olhei lá para algumas configurações conflitantes. Tal como nvidia sendo e alias para outro módulo daquele que você quer ser usado.