Para copiar um arquivo do diretório pessoal em outra máquina, use:
scp remoteusername@host:fileiwanttocopy /my/local/comp
Note que o nome do arquivo depois de ':' não não começa com um '/', então é relativo a partir do diretório pessoal por padrão.