Você está quase lá, parece que o módulo do kernel Nouveau pode ser o problema. Encloqueie-o em modprobe.d editando "/etc/modprobe.d/blacklist.conf" e adicione essas linhas.
blacklist nouveau blacklist lbm-nouveau blacklist nvidia-173 blacklist nvidia-96 alias nvidia nvidia-current
, em seguida, reconstrua o initramfs com
sudo update-initramfs -u
reinicialize e faça lsmod
para ver se algum novo módulo está carregado. Caso contrário, faça o instalador da NVidia.