Isto é devido ao problema de memória no lado da CPU, você pode abrir o monitor do sistema para ver se você tem arquivo de swap na tag resources, quando o intervalo do mouse acontece.
Também gostaria de sugerir o uso de 17.10 para a placa GTX da Nvidia, já que anteriormente eu tentei usar GTX com 16.04.3 e atrasos de mouse / teclado após o sistema funcionar por um tempo. Então eu mudo para 17.10, então tudo corre bem novamente.