Da sua mensagem eu realmente não entendo se é o caso ou não, mas você digitou xxx.xxx.xxx.xxx ou xxx.xxx.xxx.xxx: como a última parte do comando. Se você não usar o segundo, acho que isso é sincronizado localmente. Você pode verificar se você tem um diretório nomeado como seu endereço IP localmente.
Eu sugeriria (copiar o conteúdo da compilação em um diretório criado no remoto
rsync -axH --delete -e ssh --stats -P build/ user@IP:build/