Parece que você está tentando projetar seu próprio sistema de armazenamento hierárquico. Você está ciente de que existem produtos por aí que podem gerenciar isso para você? O Tivoli Storage Manager é uma dessas coisas.
Atualmente, estou procurando projetar uma arquitetura de armazenamento para uma equipe de produção de vídeo. Eu tenho a parte do disco classificada, mas estou procurando alguns conselhos sobre a parte da biblioteca de fitas / arquivo de longo prazo.
Os recursos de vídeo são todos armazenados centralmente e gerenciados por um servidor gerenciador de ativos central. Os clientes os acessam pela rede e, no momento, isso funciona muito bem.
O que eu gostaria é que uma biblioteca de fitas seja apresentada ao sistema como um compartilhamento de rede, para que um trabalho de arquivamento automático possa simplesmente copiar os ativos do armazenamento em disco para o compartilhamento de rede. O software de fita, então, gerenciaria o processo de colocar esses dados em fita e fazer algum cache no disco local. Qualquer cliente que se conecte à unidade de rede verá o catálogo completo de arquivos e diretórios armazenados em fita e poderá iniciar uma retirada da fita (ou cache) apenas solicitando o arquivo pela rede. Obviamente, isso seria uma latência bastante alta, mas tem a vantagem de não exigir que o cliente tenha nenhum software ou conhecimento especial sobre como as bibliotecas de fitas funcionam.
Existe um produto chamado XenData que parece fazer exatamente isso ( link ), mas parece ser apenas para Windows e não consigo encontrar revendedores online. Existem outras soluções de software que podem fazer algo semelhante?
Possivelmente o HP LTFS? Eu nunca tentei, mas pretende apresentar fitas como volumes de disco (que você poderia então compartilhar com o NFS, SAMBA, etc) usando um driver FUSE, que é como eu poderia implementar tal conceito ...