Perguntas sobre 'large-files'

Tags
4
respostas

grep: Quais padrões * são correspondidos, não qual texto?

Ao manter nossas regras de verificação de log local, seria bom saber quais não estão mais sendo usadas. Estou tentando encontrar uma maneira razoavelmente eficiente de fazer isso. Em outras palavras, dado um número bastante grande de padrões...
10.08.2017 / 18:02
3
respostas

como criar arquivos multi-tar para uma pasta enorme

Eu tenho uma pasta grande com 30 milhões de arquivos pequenos. Espero fazer o backup da pasta em 30 arquivos, cada arquivo tar.gz terá arquivos de 1M. O motivo para dividir em multi-arquivos é que, para descompactar, um único arquivo grande demo...
20.04.2015 / 20:58
2
respostas

Como determinar o tamanho do arquivo tar sem criá-lo?

Estou arquivando alguns diretórios todas as noites para a fita LTO-7 com cerca de 100 ou mais arquivos grandes (2 GB) em cada um deles. Como uma verificação de que os dados foram escritos corretamente, estou verificando se o número de bytes r...
07.09.2016 / 16:33
1
resposta

Posso apagar com segurança o arquivo ~ / Trash?

Minha conta Uni está acima da cota de disco e a solicitação de mais cota leva tempo. Infelizmente, eu preciso de espaço em disco agora e notei que o arquivo Trash em meu diretório pessoal é um arquivo bastante grande. Estou assumindo que...
11.02.2011 / 20:26
1
resposta

Edite arquivos realmente grandes com vi

Como posso editar um arquivo realmente grande com o vi? por exemplo: um arquivo de log de 20 GB. Há alguma modificação para lidar com esse tamanho?     
26.05.2011 / 17:55
1
resposta

É possível obter lista de arquivos, intervalo de bytes da cabeça de um arquivo tar + bzip2?

Essencialmente, espero que alguém com um conhecimento avançado de tar / bz2 possa responder se isso é possível. A situação é que temos um feed periódico de 24 GB de dados de um fornecedor, como um arquivo .tbz. (tar + bzip2). Isso é baixado d...
27.02.2014 / 23:35
1
resposta

Limite de tamanho de transferência para SCP, SFTP, RSYNC?

Existe um limite de tamanho máximo para o tamanho coletivo dos arquivos que devem ser transferidos de uma só vez para o protocolo acima. Minha intenção é saber se, por exemplo, após 1 GB, qualquer um desses protocolos de transferência começaria...
23.05.2016 / 18:56
3
respostas

deduplicação de linhas em um arquivo grande

O tamanho do arquivo é 962,120,335 bytes. HP-UX ****** B.11.31 U ia64 ****** licença de usuário ilimitado hostname> what /usr/bin/awk /usr/bin/awk: main.c $Date: 2009/02/17 15:25:17 $Revision: r11.31/1 PATCH_11.31 (PHCO_36132)...
19.03.2015 / 08:39
1
resposta

ed: define a primeira linha como a linha atual padrão

Estou tentando usar ed para editar a primeira linha de um arquivo grande, mas tenho que esperar que ed leia todas as linhas. Existe alguma maneira que eu poderia parar ed de ler o arquivo inteiro e começar a editar imediatamente, com a...
11.07.2012 / 09:53
3
respostas

Como posso obter a primeira coluna de um arquivo txt de 300GB?

deixe-me primeiro explicar o meu problema em detalhe. Na verdade é bem simples. Eu tenho um enorme arquivo .txt, 300GB para ser mais precioso, e gostaria de colocar todas as strings distintas da primeira coluna, que correspondem ao meu padrão em...
29.05.2014 / 15:29