Você pode tar os arquivos e mover o tar. Ou canalizar tar com SSH: consulte link
Tar-ing os arquivos exclui a sobrecarga para cada arquivo único como o tarball é realmente um único arquivo.
Se você não puder descompactar / descompactar do outro lado (talvez porque seja um FTP de hospedagem compartilhada), não há muito o que fazer.