Você não mencionou como sua RAM está alocada. se a VM for muito pequena, isso causará atividade de paginação, que pode aparecer como falhas de página na VM. Pensando que isso pode manter sua carga de cpu à medida que você entra e sai do seu espaço de troca (se estiver no disco de ram, você provavelmente não verá muito IO de host, principalmente VM io)