Eu tenho visto problemas semelhantes com o 14.04. Eles pareciam ser corrigidos em 14.10, e ainda melhor em 15.04 (este último, especificamente em relação aos cartões nVidia). Portanto, a atualização provavelmente valerá uma tentativa.
O problema subjacente parece ser um erro dentro do próprio Unity. Eu não encontrei nada parecido no XFCE, KDE ou Cinnamon. Se você não deseja instalar um sistema completo (talvez em uma segunda partição?), Você pode tentar um desses gerenciadores de desktop, ver se ele funciona melhor com sua placa gráfica.
HTH.