Laypout de armazenamento de arquivos grandes [fechado]

Question

Estou brincando de comprar um grande armazenamento redundante para todos os dados da família, como fotos antigas, backups causais e outros.

Minha principal pergunta aqui é como fazer o layout para que seja seguro, acessível e funcione com o zoológico de dispositivos domésticos. A idéia básica era pegar um NAS de 2 ou 4 portas, puxar algum ZFS e esquecer o problema. Todo o acesso acontece por SMB / SFTP / o que quer que seja, e o ZFS manipula a redundância no grupo de discos. Se o disco for frito, ainda poderei lê-lo em uma máquina normal, porque não é um RAID de propriedade bloqueado.

Mas o que acontece se o NAS for atingido por um raio? Ou, de forma mais realista, perdi a maioria dos meus dados não por causa de um aparente problema de hardware, mas porque o sistema de arquivos estava frito. Olá, HFS +, meu velho amigo ...

Eu pensei em obter dois NASes, um, como 2-bay para problemas cotidianos, para backups diários de máquinas normais e tê-lo como um hub de mídia é uma vantagem. E um segundo NAS com todos os benefícios de desduplicação do ZFS para fazer backup das partes do primeiro NAS. Mas isso está lentamente saindo da minha confortável faixa de preço.

Digamos, dois compartimentos com unidades maiores com uma parte de ambas as unidades como RAID-0 (ou contraparte do ZFS) para itens diários e ok para quebrar . E uma parte como RAID-1 (ou melhor ZFS no JBOD) para fazer backup das coisas sensatas. Mas a parte de backup deve obviamente ser maior que a parte inicial. Então, pegando os drives padrão de 4 TB e particionando mesmo em 25:75, eu apostaria 2 TB scratch e 3 TB backup. Não é mais fácil e mais barato apenas comprar alguns drives externos de 2-3 TB e sofrer?

Backups causais de todos os Macs em casa rodam a partir de agora com seu Time Machine, então eu também precisaria enganar um Mac a pensar que o NAS é um destino Ok para um backup de rede. Mas essa é outra história e estou contente em criar uma imagem de disco esparsa para fazer backup.

Minha pergunta parece que eu realmente não sei o que eu quero. Eu gostaria de ouvir:

• Experimente relatórios com NAS e segurança de dados. (Eu estarei digitalizando todas as fotos da família de anos atrás, e não quero fazer isso duas vezes, especialmente quando a fonte original física decai.)
• Opções do sistema de arquivos. ZFS vs. ext4 vs. TIMBZJVBWEJVKSAFNGSAHFSTFS versus o que o NAS suporta versus o que eu posso bater um Mac em leitura com o Fuse. Por favor, não use NTFS, HFS +, UFS simples e exFAT, a menos que você possa realmente me convencer.
• Sugestões de configuração. Em um orçamento ilimitado eu iria para, como 4 e 8-bay NAS, só porque. O que é um exagero e o que não é. Ter duas NASes faz algum sentido?
• Um NAS inteligente ou um PC discreto com muitos discos rígidos / um NAS "burro"?
• Eu quero uma configuração do tipo "teve o sexo ruim ao configurá-lo uma vez, funciona como um charme desde sempre". Eu posso ser preguiçoso e desprezar as vibrações do Mac, mas trabalhei anos como administrador de Linux de baixo escalão nos meus primeiros anos. Então, se eu precisar puxar meu próprio sistema operacional, provavelmente seria um Debian.

Answer 1

Não há truques a serem feitos na configuração de backups para Macs, o Time machine aceita unidades remotas como destino para backups.

O ZFS em uma configuração RAID é o caminho a seguir.

What is ZFS? ZFS is an enterprise-ready open source file system, RAID controller, and volume manager with unprecedented flexibility and an uncompromising commitment to data integrity. It eliminates most, if not all of the shortcomings found in legacy file systems and hardware RAID devices. Once you go ZFS, you will never want to go back.

veja também o link do para uma implementação gratuita de um "software de aplicação" NAS com uma interface web de gerenciamento, baseada no FreeBSD + ZFS.

FreeNAS is an operating system that can be installed on virtually any hardware platform to share data over a network. FreeNAS is the simplest way to create a centralized and easily accessible place for your data. Use FreeNAS with ZFS to protect, store, backup, all of your data. FreeNAS is used everywhere, for the home, small business, and the enterprise.

Sobre o hardware: na verdade, também para o ZFS você não deseja placas RAID de hardware, pois isso oculta a geometria real do disco rígido do ZFS. Sua melhor aposta é usar PCs / servidores que suportem vários discos rígidos rápido .

O ZFS também precisa de memória, dependendo do tamanho dos discos. Esteja preparado para tal equipamento ter pelo menos 8GB de RAM.