Primeiro, o pool.ntp.org é não uma fonte recomendada para o Serviço de Tempo do Windows. Veja aqui: Sincronização de Horário do Active Directory - Tempo- ID do Evento de Serviço 50
Estou confuso com o seu comentário de que este servidor está desativado, mas todos os outros são precisos, mas você está usando o pool.ntp.org. Em um ambiente do Active Directory, o PDCe é o servidor de horário "raiz" com o qual todos os outros controladores de domínio são sincronizados (e todos os servidores membros e estações de trabalho são sincronizados com os controladores de domínio). O PDCe deve ser configurado para sincronizar com uma fonte de tempo externa via NTP. O PDCe deve ser o único servidor que sincroniza com uma fonte externa.
Veja aqui: link
Observe que, se você estiver em um ambiente do Active Directory e estiver sincronizando tudo do PDCe como deveria, as VMs não deverão ser configuradas para sincronizar seu tempo com o host físico. Se você tiver duas coisas tentando corrigir o relógio, elas lutarão entre si.