não!
Isso realmente depende do software da Máquina Virtual.
Eu usei o VMware Workstation para um propósito muito semelhante. Quando você ativa a passagem USB, você simplesmente precisa do driver padrão correto para o sistema operacional convidado e nada mais.
Então, insira o dispositivo, encaminhe-o para a VM (novamente, diferente, dependendo do que estiver usando) e instale os drivers lá.