Você pode configurar o cliente SSH para não tentar autenticação por senha:
rsync -e 'ssh -o PasswordAuthentication=no' ...
Existe também uma opção BatchMode
que desativa a senha autenticação e diminui o tempo limite:
rsync -e 'ssh -o BatchMode=yes' ...