Você pode adicionar um arquivo config (sem extensão de arquivo) à sua pasta .ssh com a seguinte entrada:
Host x
HostName example.com
User me
IdentityFile ~/.ssh/key
Agora, você pode fazer login em example.com com o nome de usuário me e a chave privada key com o seguinte comando:
ssh x