Mesmo se você desmontar ou ejetar o modem ainda terá luzes acesas, pois o USB ainda alimentará sua energia, então nada para se preocupar com o Ubuntu não vai usá-lo, a menos que esteja conectado. use-o até a próxima reinicialização ou puxe-o para fora e reconecte-o