Se você estiver copiando arquivos de seu servidor remoto
Então, por que o endereço especificado local 127.0.0.1
Quando inserido a partir do seu prompt local . O comando deve ler
scp REMOTE_USER@REMOTE_ADDR:/remote/file/location /local/file/location