Que sistema de arquivos posso usar para uma grande quantidade de dados de tamanho pequeno?

2

Eu estava copiando ~ 3.7TB de dados de uma unidade externa de 4TB com sistema de arquivos HFS +, para outra unidade externa de 4TB com um sistema de arquivos exFAT. O novo HDD foi preenchido depois que apenas ~ 75% dos dados puderam ser transferidos, devido a, eu estou supondo, o tamanho da unidade de alocação do exFAT usando mais espaço por arquivo para tamanhos pequenos de arquivo.

Estou copiando muito (~ milhões) de arquivos pequenos (1.5kB cada). Então estou tentando descobrir como fazer isso.

Portanto, eu preciso de um sistema de arquivos que preencha os seguintes requisitos:

  • Tamanho de bloco pequeno o suficiente para caber em milhões de arquivos do tamanho de 1,5 kB, desperdiçando espaço mínimo. (aqui exFAT tem um problema)

  • Compatível com leitura / gravação com o Linux. (aqui o HFS + tem um problema)

  • Capaz de fazer uma partição 4T no Linux. (aqui ext4 tem problemas)

Qualquer sistema de arquivos alternativo?

UPDATE: Esta questão foi sinalizada como já foi respondida em outro post ( Otimizando o sistema de arquivos para vários arquivos pequenos? . No entanto, a resposta aceita não funciona para mim:

mkfs.ext4 -b 1024 /dev/your_partition

Warning: specified blocksize 1024 is less than device physical sectorsize 4096
/dev/sdc: Cannot create filesystem with requested number of inodes while setting up superblock
    
por hirschme 27.08.2018 / 22:29

0 respostas