Não. USB destina-se a instalar um driver toda vez que o dispositivo é conectado, e conectá-lo está vinculado pela porta.
Portanto, se você conectar um driver e desconectá-lo, a instalação continuará no segundo plano, mas o driver não será usado. Se você conectá-lo à porta que você sempre faz, ele detecta o driver antigo para essa porta e ignora a instalação.
A regra básica é: se um dispositivo não funcionar em uma porta USB, você sempre pode tentar conectar o dispositivo em outra porta para reinstalar os drivers.