Eu diria que usar sftp causa rsyncs algoritmo de hash atual que o remetente usa para encontrar correspondências para dados movidos pode causar problemas com arquivos muito grandes. A tabela hash atual tem um tamanho fixo de 65536 slots e pode ser sobrecarregada para arquivos realmente grandes. Veja um tópico de discussão aqui