Eu acabei de encontrar o mesmo problema, então acho que uma resposta aqui seria útil.
O problema parece estar relacionado à atualização mais recente do navegador Google Chrome. Há um problema em aberto para ele aqui
A solução mais fácil é desabilitar a integração do mouse no VirtualBox. É um pouco inconveniente, mas muitas pessoas relataram que isso resolveu o problema para eles. Uma solução alternativa é fazer o downgrade para o Chrome 40, que é mais complicado, mas pode ser mais conveniente a longo prazo, até que uma correção mais permanente seja exibida.