Se você gosta de fazer isso apenas uma vez, apenas o download e a instalação manuais podem ser o melhor caminho.
Mas se você quiser atualizar o regulary, tente usar o pinning do APT para forçar um repositório específico, você pode encontrar mais em link
Eu nunca usei para repo apenas para especificar a versão do pacote, então não sei como fazer isso funcionar dessa maneira.