(isso deve ser um comentário, mas é um pouco longo)
É muito improvável que isso seja causado pelo conjunto de criptografias (se esse fosse o gargalo, você veria uma das CPUs saturadas). Nem é provável que seja o seu disco I / O (isso é fácil de determinar experimentalmente usando ferramentas como fio ou Bonnie ++ - não use 'dd' como isso apenas mede gravações de streaming)
O Rsync é um protocolo bastante tagarela; A taxa de transferência será limitada pelo seu RTT. Embora seja fácil aumentar a largura de banda, é difícil diminuir a latência. Você pode confirmar isso usando tc e aumentando a latência / medindo o impacto.