Atualmente, usamos o rsync para fazer o backup de discos virtuais em outro computador.
O rsync é mais lento que a cópia direta, mas sobrescreve apenas as partes modificadas nos arquivos de destino. Isso permite que os snapshots tenham histórico de backup, portanto, temos várias semanas de histórico com apenas 3,6 TB de armazenamento (os arquivos de origem são de 1,6 TB).
Além de ser lento, o principal problema é que o rsync muitas vezes não consegue fazer seu trabalho em arquivos grandes, especialmente quando eles contêm muitos dados idênticos (ou seja, zeros nas áreas não utilizadas). Está sempre pendurado.
Nós testamos xdelta e xdelta3, mas eles não são eficientes com arquivos grandes.
Nós testamos o rdiff, mas esta não é a ferramenta certa.
Nós testamos open-vcdiff, também não é a ferramenta certa.
Não precisamos de uma ferramenta capaz de encontrar dados semelhantes em todo o arquivo. Nós só precisamos comparar os arquivos por bloco, e transferi-los apenas quando eles diferem.
Pergunta: qual ferramenta podemos usar para comparar 2 blocos de arquivos por bloco e transferir as diferenças?