O Virtualbox usa dois aplicativos separados, a máquina virtual real e o Virtual Box Manager. Nós não podemos testar isso aqui, mas parece provável que o uso de RAM que você observou é do Virtual Box Manager, a GUI para gerenciar todas as suas máquinas virtuais, e não da própria VM.
Para acelerar o Ubuntu, precisamos garantir que o seguinte seja cumprido:
- ative o VT-x ou o AMD-V no BIOS e nas configurações da VM
- atribua RAM suficiente (1024 é bom, mas deixe pelo menos 512 MB a mais para o host)
- forneça RAM de vídeo suficiente (escolha 128 MB)
- ativar a aceleração 3D nas configurações da VM
- instale Adicionais para convidados para ( limitada) aceleração 3D de hardware
- do desempenho do Ubuntu 12.10 é melhor de 2 núcleos de CPU em diante (note que se você tiver apenas um sistema dual-core que isso possa afetar a operacionalidade do host)