Perguntas sobre 'large-files'

Tags
4
respostas

Maneira rápida de adicionar / anexar a um arquivo grande [fechado]

Eu tenho um script bash que lê um arquivo bastante grande, linha por linha, e para cada linha faz algum processamento e grava os resultados em outro arquivo. Atualmente, estou usando echo para anexar ao final do arquivo de resultado, mas à...
03.08.2015 / 22:39
3
respostas

Filesystem surpreendentemente grande

Eu estou executando um dual booted Windows 7 com Linux Mint agora e eu apenas verifiquei o tamanho do meu sistema de arquivos e ele saltou de muito pequeno (cerca de 30 GB) para 200 GB recentemente (não tenho idéia do que desencadeou isso, eu no...
20.02.2014 / 06:22
2
respostas

Crie pequenos arquivos de registro de um grande grupo de arquivos de registro

Eu tenho um arquivo como este: Mainfile: Record|1111|ABC text in between for record 1 text in between for record 1 Record|2222|XYZ text in between for record 2 Record|3333|XYZ text in between for record 3...
05.12.2014 / 10:41
1
resposta

Ferramenta de arquivamento mais rápida (não compactada) do que tar?

Estou usando o tar para arquivar um monte de arquivos na fita LTO-7. Geralmente, cada arquivo tem cerca de 1 a 2 GB, e pode haver várias centenas deles em cada arquivo (até ~ 1 TB por arquivo). No momento, estou arquivando usando: tar -cvf...
01.09.2016 / 21:02
3
respostas

Arquivo não copiável de 5 GB, BTRFS

Eu tenho um arquivo tar de 5,3 GB, localizado em uma unidade eSATA particionada por BTRFS. Ao tentar copiar o arquivo para outro disco ou expandir o tar, o processo parece congelar. Nenhum erro é gerado e a espera não parece dar frutos. Quand...
23.06.2011 / 17:27
1
resposta

Como o copytruncate realmente funciona? [fechadas]

Gostaríamos de entender copytruncate antes de girar o arquivo usando logrotate com a configuração abaixo: /app/syslog-ng/custom/output/all_devices.log { size 200M copytruncate dateext dateformat -%Y%m%d-%s rotate 365 sharedscripts...
15.10.2018 / 09:49
1
resposta

Por que ele se dirige; cauda em um arquivo grande, por vezes, demorar muito tempo e às vezes não?

Estou escrevendo um script que lê as 10 primeiras linhas e as últimas 10 linhas de um arquivo .txt. Ele procura por iniciado (head) e completed (tail) e compara o número de ocorrências usando grep. Os arquivos são muito grandes e é por isso que...
17.08.2017 / 16:57
1
resposta

Como lidar com o download repetitivo de alguns arquivos grandes específicos que vêm da Internet

Vamos oferecer um aplicativo que permitirá aos nossos clientes baixar algum tipo de guia de áudio para o castelo em que trabalho. Eu realmente gostaria de não ter todos os usuários que baixam o aplicativo (através do meu WiFi gratuito que ofe...
20.11.2014 / 11:39
3
respostas

awk ler endereço incorreto do erro

Eu tenho um arquivo com aproximadamente 30 GB. Estou usando, awk ' $1 <= 2000 ' myfile.txt >> myfile_new.txt Mas, recebo esse erro depois de um tempo - awk: read error (Bad address) Eu acho que isso é porque o arquivo é mu...
18.10.2013 / 20:44
1
resposta

Os melhores parâmetros para o sistema de arquivos ext4 para lidar com imagens de disco do VirtualBox

Eu tenho a partição ext4, que contém arquivos de imagem de disco com os quais o VirtualBox trabalha. Todas elas são imagens de tamanho fixo (ou seja, arquivos nunca mudam de tamanho). Eles são desfragmentados o máximo possível (com e4defrag)....
08.04.2014 / 14:38