Melhor idéia é usar autenticação de chave. Primeiro, você precisa gerar um par de chaves pública-privada em sua máquina local:
ssh-keygen
e adicione sua nova chave pública ao servidor remoto:
ssh-copy-id user@host
Depois disso, você estará autenticando no servidor remoto sem senha.