Você deve entrar na interface nagios e reconhecer a interrupção que deve interromper os alertas subsequentes, lembrando-se de desmarcar isso quando o serviço for restaurado, ou se for uma manutenção agendada, colocar o serviço / servidor em tempo de inatividade agendado.
Configurar o alerta apenas uma vez, não é o que eu chamaria de melhor prática, pois você está dizendo ao sistema para assumir que recebeu o primeiro alerta e não para enviar alertas subsequentes, o que é um mundo perfeito. isso nem sempre é o caso, como um envio de email com falha devido à interrupção temporária do smtp ou à interrupção temporária do gateway de SMS.