Suponha que eu tenha XFS como um sistema de arquivos e eu usaria os drives SATA SEATATE Enterprise Capacity 10TB. Devido ao sistema de arquivos XFS, pode haver no máximo 800 discos em um sistema de arquivos. Quais são outras limitações?
Por exemplo, você precisa energizar / resfriá-los adequadamente e conectá-los. Eu vi o FANTEC QB-35US3-6G que permite colocar 4 discos nele e depois conectá-lo via eSATA a um PC. Portanto, o limite de armazenamento que você pode obter com soluções prontas para uso seria muito menor em 40 TB.
Esta questão é apenas por curiosidade. Eu sou um desenvolvedor de aprendizado de máquina. Os conjuntos de dados estão se tornando realmente massivos ( exemplo ). Eu só gostaria de saber qual é o estado atual; Em que quantidade isso se torna realmente caro / difícil de lidar com os dados? Até agora, parece que < 10 TB é relativamente simples, < 40 TB ainda pode estar ok.
Tags hard-drive storage filesystems