Sim. Abra a janela VirtualBox Manager e vá ao menu "File", "Preferences" (Ctrl-G).
Em "Input", desmarque a caixa "Auto Capture Keyboard". Não há necessidade de reiniciar a VM se ela estiver em execução, portanto, isso pode ser alterado "on the fly".