Você não pode :) porque a chave que você precisa ao seu lado é a sua chave privada que você nunca enviou ao github. Se você o perdeu, não é um problema, você pode simplesmente gerar uma nova chave em seu sistema e fazer upload do público parte para o github .