Sim, você pode. As VMs são, em sua maioria, independentes do hardware 'real' em que são executadas. Eles emulam um conjunto padrão de hardware e, se ambos os hosts suportarem os recursos necessários, as coisas são simples.
Tradicionalmente, basta desligar a VM (para consistência de dados), copiar o arquivo de configuração e as imagens de disco, apontar o software da VM para os arquivos com as alterações de caminho necessárias e você está bem
Quando disponível, valeria a pena exportar a VM, como diz um OVA, e importá-la novamente. Isso simplifica consideravelmente o processo.
Muitos hipervisores modernos também têm algum tipo de migração ao vivo.
No entanto, você pode encontrar problemas de licenciamento e ativação em alguns sistemas operacionais. Não tenho certeza se você precisaria reativar as janelas se migrou a VM, mas certamente não será legítimo se você executar duas cópias de uma única licença em hosts diferentes.