Se você está falando sobre a virtualização x86 em um host x86, esteja ciente de que o kqemu (o antigo módulo de aceleração do kernel para o qemu) está obsoleto. KVM (Kernel Virtual Machine) é "o caminho a seguir", mas funciona apenas em hosts Linux. O convidado pode ser qualquer sistema operacional desejado, desde que seja a arquitetura x86.
Arquitetura cruzada, o qemu ainda é muito lento; apenas hoje eu estava tentando o qemu mais recente com o Debian MIPS64 no guest .... ele era utilizável de um terminal mas horrivelmente lento no Xorg. Pelo que eu sei, você não pode usar as instruções de aceleração do processador, como tabelas de páginas estendidas ou VT-x, quando você usa a arquitetura cruzada. Tudo é emulado em software.
Portanto, para a virtualização de x86 para x86, o qemu "bruto" é lento, mas o KVM (que usa qemu) é rápido. Muito rápido. Tão rápido que é a solução de virtualização recomendada pela Red Hat para o RHEL.
O VirtualBox ainda afasta tudo o que o qemu / kvm pode oferecer em termos de desempenho gráfico de 2d / 3d acelerado por hardware, porque a kvm se concentra na virtualização de servidores e o virtualbox se concentra na virtualização de desktops. Mas eu definitivamente recomendo que você verifique o kvm se você estiver lidando com um servidor.
Editar: Para os seus hosts que não possuem nenhuma aceleração de hardware, você sofrerá com uma grande sobrecarga, independentemente de qual solução virt você usa. Emular as coisas de hardware no software é difícil e caro.