Encontrei isso no wiki do Arch: link
Basicamente, você executa gnome-keyring-daemon -s
para obter seu valor de chaveiro específico e, em seguida, para seu .bashrc, adicione:
SSH_AUTH_SOCK='netstat -xl | grep -o '/run/user/yourusername/keyring-xxxxxxx.*/ssh$''
[ -z "$SSH_AUTH_SOCK" ] || export SSH_AUTH_SOCK
Isso deve fazer com que o ssh peça sua senha por meio da GUI do keyring.