Neste caso, quando você não tem acesso físico ao servidor remoto, você deve entrar em contato com todos os includes e exclui. Existe um excelente post aqui, no SE (veja a resposta em destaque):
Filtro Rsync: copiando somente um padrão
Eu acho que você precisará de algo como
rsync -am --include='*.tar.gz' --include='*/' --exclude='*' SOURCE DESTINATION