A maneira mais simples seria alterar seu endereço SMTP para algo arbitrário. Eles ainda existirão e a caixa de correio ainda estará acessível, mas o e-mail para o (s) endereço (s) anterior (is) começará a ser devolvido.
Em um ambiente de diretório ativo, isso significaria abrir Usuários e Computadores do Active Directory, clicar com o botão direito do mouse em sua conta, escolher a guia "Endereços de Email" e modificar as entradas da lista que correspondem ao tipo "SMTP".