Tentei drivers diferentes do site da NVIDIA e isso resolveu o problema. EDIT para fornecer mais detalhes: Drivers baixados do site da NVIDIA aqui . Acabei de pegar meu cartão e versão do Linux dos drivers. Então, a partir da linha de comando eu executei:
sudo service lightdm stop
sudo sh drivername.run
Instruções do motorista seguidas
sudo service lightdm start