Você está tentando usar o KVM, um hipervisor assistido por hardware, dentro da caixa virtual, onde isso não é suportado. O que você está tentando fazer é chamado de virtualização aninhada, e o vbox é uma má escolha para um recurso tão poderoso.
Sem --enable-kvm
, você acaba usando o qemu puro, ou seja, a emulação e não a virtualização, que é terrivelmente lenta.
Então, realmente, as coisas estão funcionando como esperado, você está simplesmente usando as ferramentas erradas se realmente precisar usar o aninhamento.