O processo do sistema que manipula seu mouse já tem a maior prioridade possível. O problema real aqui é que a sua CPU está tão ocupada que não consegue lidar com as interrupções de hardware geradas pelo seu mouse.
Você precisa reduzir a carga da sua CPU ou obter um computador mais rápido.