Perguntas sobre 'large-files'

Tags
3
respostas

Substituir o texto rapidamente em um arquivo muito grande

Tenho um arquivo de texto de 25 GB que precisa de uma string substituída em apenas algumas linhas. Eu posso usar sed com sucesso, mas leva muito tempo para ser executado. sed -i 's|old text|new text|g' gigantic_file.sql Existe uma mane...
14.01.2016 / 20:14
3
respostas

Emacs: Abra um buffer com todas as linhas entre as linhas X a Y de um arquivo enorme

No mesmo espírito dessa outra pergunta: cat line X para linha Y em um arquivo enorme : Existe uma maneira de abrir o no Emacs (e mostrar em um buffer) um determinado conjunto de linhas (por exemplo, todas as linhas entre a linha X e Y...
08.09.2012 / 01:38
7
respostas

grep com padrão de um arquivo (3.2Gb) correspondente em outro arquivo (4.8Gb)

Eu tenho dois arquivos de texto. Um é um arquivo de texto com nome, endereço de e-mail e outros campos. Algumas linhas de file1 : John:[email protected]:johnson123:22hey Erik:[email protected]:johnson133:22hey Robert:[email protected]:j...
01.08.2016 / 21:13
2
respostas

Comando básico sed em um arquivo grande de uma linha: não foi possível realocar a memória

Eu tenho um arquivo de texto de 250 MB, tudo em uma linha. Neste arquivo, quero substituir a caracteres por b caracteres: sed -e "s/a/b/g" < one-line-250-mb.txt Falha com: sed: couldn't re-allocate memory Parece-me que...
19.12.2013 / 04:31
3
respostas

Como recomprimir 2 milhões de arquivos gzip sem armazená-los duas vezes?

Eu tenho cerca de 2 milhões (60GiB) de arquivos pequenos gzipados e gostaria de criar um arquivo compactado contendo todos eles em uma versão não compactada. Infelizmente, não posso simplesmente descompactar todos eles e depois criar o arquivo c...
06.11.2014 / 14:55
1
resposta

Visualização de imagem grande no Linux

Eu preciso visualizar uma imagem png grande (50000x40000 px) no Linux. Infelizmente, a maioria das ferramentas (eog, convert, etc.) falha ou falha com a nota sobre pouca memória. Existe uma maneira de visualizar esta imagem (prefiro ver a ima...
02.06.2013 / 19:41
6
respostas

Buscando um GUI alternativo Editor de arquivos com suporte a arquivos grandes

Alguém pode recomendar um editor de arquivos, de preferência gratuito, que lida com arquivos grandes, bem como o EmEditor no Windows ? Eu estou no Ubuntu, mas outras pessoas lendo isso podem não ser, então sugestões para outros sistemas operaci...
27.09.2012 / 06:59
2
respostas

Maneira fácil de copiar linhas de um arquivo para outro [duplicado]

Problema muito simples, mas parece que não consegue encontrar uma solução simples! Eu tenho um arquivo de texto enorme, do qual eu preciso apenas de cerca de 150 linhas. As linhas são muito longas e, portanto, visualizá-lo em massa é um p...
18.01.2013 / 10:41
1
resposta

Mesclar blocos não-nulos de arquivos grandes (esparsos) A em arquivos grandes B

Eu tenho duas imagens de disco parciais de um disco rígido com falha. O arquivo B contém a maior parte do conteúdo do disco, com intervalos em que as leituras do setor falharam. O arquivo A é o resultado de informar ddrescue para tentar nov...
26.11.2013 / 19:10
1
resposta

melhor maneira de dividir arquivos grandes com base em um campo quando o awk é muito lento

Estou com problemas para lidar com enormes arquivos .gz (maiores que 500G). Meu objetivo é dividir cada um deles pelo quarto campo nesses arquivos. Existe este belo one-liner awk que eu usei antes para fazer isso: zcat file.txt.gz | awk 'NR&g...
02.05.2017 / 07:25