O repositório para o Ubuntu 14.04 LTS contém atualmente arquivos para o Qt5 até a versão 5.2.1
Sempre que houver uma nova versão, a equipe do Ubuntu terá que garantir que esta nova versão seja integrada ao repositório. Mas geralmente apenas correções de bugs e pequenos recursos são adotados em versões mais antigas do Linux.
O 14.04 é uma versão do Suporte de Longo Prazo, portanto, ele recebe atualizações por mais tempo, mas não tenho certeza se receberá o Qt mais recente. Além disso, essa versão é bem nova, então levará algum tempo até que ela chegue ao repositório.
Portanto, não há uma maneira fácil de fazer o que você deseja. Eu assumo agora um pouco sobre o empacotamento , já que você disse que já empacotou um aplicativo. Talvez um PPA possa ser uma solução. Você pode fornecer um pacote para o Qt5.4 e outro para o seu aplicativo. Talvez já exista um Qt PPA, mas não consegui encontrar um.
Editar: Talvez este PPA