Não é uma resposta exata, já que eu não sei se está tudo bem para os diretórios de cache rsync (você tentou? quais resultados você obteve?), mas se você configurou o nginx corretamente não importa qual servidor você enviar pedidos, eles vão buscá-lo a partir do cache, se disponível e ir para os servidores de origem, se não - isso é o ponto de cache: eles vão preencher com o uso.
Eu não me preocuparia muito com a semeadura inicial, a menos que você tenha um cenário muito estranho e muito específico.