Se você desabilitar a aplicação da assinatura, nada impedirá que você instale drivers quebrados, mal escritos ou mal-intencionados, que podem facilmente travar seu sistema ou algo pior.
Se você é cuidadoso com os drivers que você instala, você deve estar bem.