OK, desligue isso não ocorre ao usar os drivers do Noveau, então se você está experimentando algo semelhante, tente:
sudo software-properties-gtk
E na guia Additional Drivers
, escolha xserver-xorg-video-nouveau
.
Deixando isso aberto para respostas caso alguém encontre uma solução para drivers proprietários.