Existe uma maneira de fazer o backup da unidade NTFS desduplicada com rsync ou outra ferramenta Linux?

Question

Existe uma maneira do Linux ou uma ferramenta que está ciente da desduplicação do Windows no NTFS? Aqui eu uso o rsync para sincronizar arquivos de um compartilhamento de servidor de arquivos do AD. Os compartilhamentos são montados, somente leitura, usando mount.cifs no linux.

Como o Linux não está ciente dos arquivos desduplicados, ele sincroniza todas as cópias.

Ativei o serviço de deduplicação no Windows Server 2012 R2 porque, em uma unidade de 2TB, eu tinha apenas 190 GB livres. Após a ativação da deduplicação (+ - uma semana depois), meu espaço livre foi para 860 GB

Os compartilhamentos estão no ambiente do AD, onde vários usuários de diferentes salas / setores armazenam dados. Eles têm o hábito de fazer cópias do mesmo arquivo para outra pasta, o que eles consideram backup. - tenshimsm 4 mins ago edit

Estou iniciando uma "migração" para o BTRFS. Vou começar a usar o Snapper. Mas isso requer algumas mudanças. E como eu preciso sincronizar esses arquivos para outro disco para começar a testar instantâneos, etc.

    

Answer 1

Se o seu objetivo é realizar backups sem desperdiçar espaço em arquivos duplicados, considere fazer o backup em outra unidade desduplicada em outro servidor (Windows ou Linux). Não conheço nenhum aplicativo de backup com reconhecimento de deduplicação ... eles geralmente são executados dentro do sistema operacional e visualizam os arquivos apresentados pelo sistema operacional. Você também pode considerar o uso de links do Windows em vez de cópias do arquivo. Ou, se houver diretórios inteiros idênticos, considere colocá-los em C: \ SharedFiles ou C: \ Users \ Public.

    

Answer 2

Não estou ciente de nenhuma ferramenta de backup que tenha "consciência de deduplicação". No entanto, devido a como a desduplicação funciona, duvido que houvesse alguma. Talvez seja possível que o software de backup tenha avançado desde a última vez que olhei.

No entanto, é possível fazer backups otimizados de volumes desduplicados. Este artigo do MSDN descreve em detalhes. Em essência, sua ferramenta de backup está fazendo backups incrementais. Ao fazer o backup apenas dos arquivos alterados desde o último backup, sua ferramenta não está fazendo backup de novos arquivos com seus fragmentos desduplicados.