Perguntas sobre 'duplicate'

Dois ou mais arquivos exatamente iguais.
1
resposta

Conte e mescle padrões consecutivos

Estou procurando um snippet curto para encontrar, contar e mesclar duplicatas consecutivas usando ferramentas padrão ou uma linguagem de script comum. Diga que nossa entrada é: 1 2 2 2 7 22 a b b c c c c c d dd 2 2 c c Como saída, go...
29.01.2014 / 15:07
2
respostas

Imprime o padrão de repetição

Eu tenho um arquivo de maratona do qual eu quero imprimir os nomes dos corredores, que fizeram várias corridas. Algo como: M, 2:08:58.0, John Lukas, USA, 1997-07-25, Paris, France F, 2:15:04:0, Abebbe Boukari, KEN, 2000-10-01, London, UK...
08.12.2014 / 09:25
1
resposta

Remover linhas duplicadas de vários arquivos em uma pasta: Verificar somente arquivos dentro de um intervalo

Eu tinha uma pergunta sobre como remover linhas duplicadas em vários arquivos e recebi um script útil aqui: Remover linhas duplicadas de vários arquivos JSON, preservando a estrutura do arquivo . O problema é que minha pasta tem 10000 arquiv...
27.11.2016 / 10:35
1
resposta

Arquivo de texto contendo nomes de arquivos e hashes - extraindo linhas com hashes duplicados

Eu criei um grande arquivo de texto contendo nomes de arquivos e sha-256 hashes usando o formato abaixo - nova linha no final de cada linha depois dos hashes. arquivo_1.txt 8208ad321576b521b23b07b9ba598e5c43b03ec4172c96fdbd35a858ec205ae6 a...
19.11.2016 / 21:28
2
respostas

Uma maneira mais rápida de renomear arquivos duplicados (identificados por fdupes) em outro diretório?

Eu tenho um diretório cheio de arquivos pdf de artigos de periódicos, a maioria dos quais são nomeados por sua chave bibtex. Algum tempo atrás eu fiz um backup em um disco rígido externo, mas não o mantive atualizado e há toneladas de duplicatas...
09.04.2014 / 13:29
1
resposta

Encontre e liste diretórios duplicados

Eu tenho um diretório com vários subdiretórios e gostaria de encontrar duplicatas. A estrutura da pasta é algo como isto: └── Top_Dir └── Level_1_Dir ├── standard_cat │ ├── files.txt ├── standard_dog │...
09.06.2016 / 05:21
0
respostas

Removendo arquivos duplicados, mas ignorando certas linhas (por exemplo, timestamp incorporado)

Eu tenho um monte de arquivos de texto gzipped. Eu estou tentando remover arquivos duplicados (usando fdupes ), mas o problema é que esses arquivos contêm uma linha que tem seu timestamp neles e os arquivos são idênticos caso contrário. Eu...
12.07.2014 / 18:26
5
respostas

Como posso copiar um arquivo e criar os diretórios de destino ao mesmo tempo?

Eu quero cp aaa/deep/sea/blob.psd to bbb/deep/sea/blob.psd Como faço a cópia se os diretórios deep e sea não existirem sob bbb , para que a cópia crie os diretórios necessários e copie o arquivo? Agora eu recebo No such file...
27.06.2012 / 19:58
3
respostas

Como remover uma linha duplicada específica dentro de um arquivo?

Estou procurando uma maneira de remover uma linha específica de vários arquivos, mas somente se ocorrer mais de uma vez nesse arquivo. Outras linhas devem ser mantidas, mesmo que sejam duplicatas. Por exemplo, um arquivo como este, no qual go...
25.08.2017 / 17:39
4
respostas

Matando todo o processo de um comando, exceto primeiro processo

Às vezes, fico preso em uma situação em que um script / comando mantido no Cron é executado mais de uma vez por alguns motivos (a primeira instância não é concluída totalmente, a segunda instância do mesmo processo é iniciada) e em algum momento...
02.01.2013 / 12:44