Parece difícil descobrir o problema dos problemas que você acabou de descrever. Primeiramente, eu suspeito que isso possa ser um problema novo. Se você estiver instalando o driver da Nvidia, o nouveau deverá ser desativado.
Uma maneira de desativar o nouveau é adicionar nouveau.modeset = 0 como parâmetro do kernel:
# grubby --update-kernel=ALL --args=nouveau.modeset=0
e, em seguida, reinicie o sistema.