Sistema de armazenamento distribuído com discos offline / frios

Question

Estou procurando um sistema de armazenamento para substituir um sistema de backup personalizado. Examinei brevemente o MogileFS e o OpenStack Object Storage, mas ainda não sei se algum deles atende às minhas necessidades, já que preciso arquivar discos off-line quando eles estão cheios.

Requisitos:

• grátis.
• Pode lidar com arquivos de 100 M até alguns MiB cada.
• Suporta discos off-line / frios.
• Suporta vários nós em locais diferentes.
• Suporta redundância ao armazenar arquivos várias vezes. Por exemplo. "este arquivo deve ser armazenado uma vez no datacenter X e Y. Este arquivo deve ser armazenado apenas uma vez e não importa onde."
• Deve usar uma API personalizada e não ser compatível com sistema de arquivos POSIX.
• Deve ser executado em um ambiente Linux ou Free BSD.

O requisito mais difícil é o suporte a discos offline / frios. Isso ocorre porque apenas alguns discos podem estar online por vez. Quando eles estão cheios, eles serão substituídos por discos vazios e arquivados em um local seguro.

Qual software atende às minhas necessidades?

    

Answer 1

Eu perguntei especificamente a um fornecedor de unidade de disco se eles suportam discos que não estão ligados e armazenados em um ambiente especificamente projetado em uma prateleira fechada etc. Eles responderam que esse é um modo de operação não suportado e que você não pode confiar em para que os discos possam ser usados novamente caso você precise deles.

Existem dispositivos especiais que desligam discos quando não estão em uso, chamados de MAID (matriz massiva de discos ociosos) especificamente projetados para lidar com isso.

Em qualquer caso, você precisará de um sistema de armazenamento de objetos de classe empresarial que ofereça suporte ao ILM / HSM para implementá-lo, mas eles não são exatamente "gratuitos".