Eu também tive esse problema, a única maneira que eu poderia encontrar em torno dele foi usar o desktop remoto para remoto na própria máquina virtual diretamente, seja isso ou vá para www.logmein.com e configurar uma conta gratuita e usar isso para fazer login na máquina virtual diretamente. Por alguma razão, os ponteiros do mouse não parecem se movimentar muito bem entre três locais.
Uma coisa para tentar, você já tentou fazer sua máquina virtual em tela cheia no pc que você está se conectando ?.
Outra opção é usar um switch kvm habilitado para lan, isso é diferente de usar a área de trabalho remota em que o sinal para o mouse / teclado é alimentado diretamente no teclado e mouse no pc na outra extremidade em vez de ser virtualizado por desktops remotos, para que o ponteiro do mouse apareça na VM da mesma forma que quando visualizado no próprio computador, eles não são excessivamente baratos, embora você possa encontrar uma segunda mão no ebay.
link