Tente usar o driver nvidia-355
mais recente (ppa: xorg-edgers), ele não tem o problema de congelamento para mim.
Você pode instalar o ppa usando este comando:
apt-add-repository ppa:xorg-edgers/ppa
apt-get update
Instale o driver usando o gerenciador de drivers do ubuntus (ou como ele é chamado)