O alerta é principalmente uma recomendação, uma diretriz que deve ser "boa o suficiente" para a maioria das pessoas. Se você não deixar memória suficiente livre para o sistema operacional host, ele terá que começar a trocar e executar lentamente. Isso pode, por sua vez, paradoxalmente desacelerar sua máquina virtual, já que também precisa de recursos do sistema operacional host.
Realmente não há dano em si, ignorando o aviso, sinta-se à vontade para experimentar. Se, enquanto estiver usando (principalmente) a VM, você sentir que seu sistema fica instável e não responde, e o sistema operacional convidado ainda tiver memória livre suficiente, considere dar menos memória RAM à máquina virtual.