Existe um utilitário gratuito Excluir campos que faz exatamente o que você deseja. Basta instalá-lo com o suporte do Suplemento do Outlook e você pode executá-lo usando o menu de contexto do botão direito do mouse em mensagens selecionadas ou para a (s) pasta (s) selecionada (s) do Outlook.
Especifique os seguintes nomes de campos para excluir:
ReminderSet,ReminderTime,ReminderSignalTime
Isso excluirá os lembretes sem limpar o status do sinalizador.
AVISO LEGAL: Eu recomendo estas ferramentas porque sou um dos desenvolvedores, então sinta-se à vontade para fazer mais perguntas.