De este artigo
Armazenando senhas no chaveiro
Para armazenar a frase secreta da sua chave padrão no Keychain, abra um Terminal e execute:
ssh-add -K
E para armazenar a frase secreta para uma execução de chave diferente:
ssh-add -K /path/to/private/key/file
Quando a senha for solicitada, insira-a e é isso.
Você nunca precisará executar ssh-add nem inserir sua senha novamente.