Não sei se a remoção do dispositivo no gerenciador de dispositivos também removerá os drivers, por isso eu tentaria remover os drivers também. Parece ser um problema com o próprio computador, conforme indicado na sua pergunta, para que os drivers sejam o próximo lugar que eu procuraria.