Altere ~/.ssh/ssh_config para ~/.ssh/config . Certifique-se de que as permissões sejam 700.
Esta discussão tem muita informação boa. Você também pode seguir a tag de ssh (basta clicar em / ssh em sua pergunta) para acessar a tag wiki para mais informações e orientações sobre resolução de problemas.