Você tem que usar o kernel RHEL6 (também conhecido como 2.6.32-, ou 042stab) e configurar seus contêineres com o VSwap. Consulte o link para obter mais detalhes. Isso é feito por padrão em novas instalações.
Se você quiser mini-contêineres, atribua a RAM de que precisa e, em seguida, duas a quatro vezes a quantidade de troca, para permitir algum "alongamento" para a memória de TC. Por exemplo, para 256M isso seria
vzctl define $ CTID --ram 256M --swap 1G --save
Certifique-se de que outros beancounters (especialmente privvmpages) estejam configurados para ilimitado. Mais uma vez, consulte link para obter mais detalhes.