Manter tempo exato em máquinas virtuais é quase impossível devido à natureza da tecnologia usada. O hipervisor estenderá e comprimirá os intervalos de interrupção do temporizador a seu critério, de modo que os desvios sejam de grande escala. A latência variável relatada por ping
provavelmente será resultado de problemas de tempo.
Outras leituras: link (sim, é VMWare, mas os conceitos se aplicam a todos os hipervisores atuais)