Você pode impedir a instalação de unidades removíveis e adicionar seus dispositivos como exceções.
Pode ser configurado de:
Computer Configuration -> Administrative Templates -> System -> Device Installation -> Device Installation Restrictions
Você pode seguir este manual manual oficial da Microsoft