O que você provavelmente quer é o protótipo por Michael Sheldon que torna o DeepSpeech disponível como um método de entrada do IBus. Basta adicionar o PPAs , instale ibus-deepspeech e reinicie o servidor X. Você deve então poder adicionar "English (DeepSpeech)" como fonte de entrada.
Note que este é basicamente um software alpha; definitivamente não está pronto para o horário nobre. Mas é um bom começo.