A maneira mais rápida de copiar o diretório de arquivos grandes em internet lenta

2

Eu preciso copiar um diretório de um dos nossos servidores a várias centenas de quilômetros de distância. Ambos os sites onde estou e onde os arquivos estão com o cabo comercial. O cabo é de 5 Mbps (para baixo) / 768 Kbps (para cima). Isso representa um pequeno problema, considerando que preciso copiar cerca de 85 GB de dados.

Eu usei uma calculadora de transferência de arquivos e ela disse que levaria 11 dias e algumas alterações.

Eu queria saber se há alguma maneira de alavancar algo como o DeDup para acelerar a transferência.

O servidor do qual eu estaria copiando é o Windows 2003 R2, minha caixa é o Windows 7 Pro x64.

Eu ia transferir os dados para o meu destino iSCSI que está executando o Ubuntu Linux, com ZFS e SCST. A desduplicação sendo realizada pelo ZFS ajuda na transferência, assim os dados precisam ser DeDup'd no final do envio?

    
por ianc1215 24.09.2011 / 00:16

3 respostas

19

Compre um disco rígido externo. Copie os dados no site A. Envie-os para o site B. Copie para a máquina no site B.

Não subestime o poder do serviço postal.

    
por 24.09.2011 / 00:33
5

Existem dados duplicados?

Se não, então uma dedup não ajudará em nada; se houver, só será desduplicado através do fio, se você transferi-lo com zfs send -D - desde que seu destino é o Windows, então isso é provavelmente um não.

Não se esqueça da compactação da moda antiga.

    
por 24.09.2011 / 00:28
0

Para o Diretório com muitos dados redundantes, você pode tentar o DZO Compressor. A desduplicação faz sentido. O DZO realiza a desduplicação assim como a Compressão sem perdas. O produto ainda está em fase beta. Como por resultados iniciais em dados com duplicatas, executa 2-3 vezes melhor que winzip, winrar e outros. Consulte o link do site para obter detalhes ou faça o download da versão beta no link abaixo. link

Se os dados não contiverem duplicados, ele fornecerá a mesma compactação que o 7zip, pois usará o lzma para compactação sem perdas.

Acima só pode ajudar na redução do tamanho e, portanto, menor tempo para transferência, mas ainda pode ser em dias !!!

    
por 10.10.2011 / 12:04