Altero a saída entre um dispositivo de entrada de áudio e um dispositivo USB usando o programa "Áudio" no Ubuntu. É o mesmo que clicar no ícone de áudio superior direito e escolher a última opção (configurações de áudio). Há uma guia de entrada, que lista meus dispositivos e posso alterar facilmente o ativo.
Como não tenho certeza sobre sua configuração, mas isso pode ajudar você ou alguém com um problema semelhante. Definitivamente funciona para mim com um dispositivo USB que funciona como uma placa de som própria.