Quando você inicia uma VM no VB, você está lançando 2 processos, o VirtualBox Manager e o sistema operacional convidado Virtual Machine. O sistema operacional convidado está limitado a 2 GB, mas o gerente não é. Depois de lançar o sistema operacional convidado, você pode fechar o gerenciador.
(Eu estou executando o mesmo ambiente e funciona bem na minha máquina ... Quando eu terminar com o convidado, eu uso "salvar estado da máquina")