Eu ficaria longe do rsync para isso porque, sim, isso aumentaria a carga do servidor. Especialmente se você tiver muitos repositórios svn realmente grandes. O Rsync tem que percorrer todo o sistema de arquivos e com a forma como o svn é usado para filiais ... Sua fala MUITOS arquivos. Eu configuraria algo como o DRBD para replicação em outro nó.
Dito isto, o rsync pode funcionar para você e a carga pode não ter um impacto significativo na usabilidade.