O prompt do bash é configurado pela variável PS1 . Você pode configurá-lo simplesmente definindo a variável como por exemplo:
export PS1="$(hostname -f):~$ "
Se você quiser tornar a configuração permanente, pode colocar o comando export no seu arquivo ~/.bashrc .
Eu recomendo ler a Página do ArchWiki para mais informações.