Isso acontece por causa de muitas razões (provavelmente cristais / capacitores de qualidade diferentes em chips rtc e / ou temperaturas diferentes, ...). 30s por semana é muito, mas que poderia ser 15s por semana para cada servidor em diferentes direções (um muito lento, um rápido demais).
Para evitar isso, configure o ntp para sincronizar a hora com um servidor de horário externo. Se você não puder conectar-se fora, você pode configurar um servidor ntp em um deles e sincronizar o outro com ele. Seus relógios estarão errados, mas ainda assim sincronizados.