Quando você diz "assinatura digital", você quer dizer isso no sentido da criptografia, não apenas anexando uma assinatura de e-mail típica de "nome e endereço" a todos os e-mails, certo?
Como medida extrema, você pode remover o par de chave pública / certificado privado de suas chaves. Você poderia exportar o par primeiro para poder reimportá-lo facilmente caso desejasse assinar uma mensagem ou descriptografar uma mensagem criptografada.