Perguntas sobre 'duplicate'

Tags
Dois ou mais arquivos exatamente iguais.
2
respostas

Como duplicar um parágrafo com uma string alterada

Estou procurando algo que possa copiar um parágrafo, alterar o usuário e inseri-lo no mesmo arquivo. arquivo antes: user1 this is only a test of a lovely idea user2 this user shhould be copied user3 who has an idea for m...
08.09.2016 / 23:00
1
resposta

Identificando campos duplicados e REMOVE ambos com awk

Anteriormente, fiz a pergunta: Identificando campos duplicados e imprima ambos com awk . Eu tenho um arquivo com várias colunas e queria identificar as linhas em que os valores de coluna específicos (cols 3-6) foram duplicados. Uma respos...
18.01.2016 / 00:47
1
resposta

Encontre duplicatas em dois arquivos [duplicados]

Eu preciso criar um script que leia linhas de um arquivo e verifique se essa linha existe no segundo arquivo. Como lidar com caracteres especiais em arquivos como: ', "e \? Primeiro arquivo: a.txt aa bb cc f 'f' "g" 'h' Segundo arqui...
01.12.2017 / 13:48
2
respostas

Remove arquivos com sufixos de nome de arquivo menores

Eu tenho um diretório de arquivos com nomes semelhantes, mas com o acréscimo de dígitos como um sufixo. Eu quero remover os arquivos com menor sufixo e manter apenas os arquivos com o maior sufixo. Abaixo está uma lista de arquivos de exemplo:...
29.11.2017 / 20:59
3
respostas

Como remover duplicatas usando awk em 1th ~ 46th column of 47 field csv file?

Eu tenho um script bash para combinar muitos arquivos em um único arquivo csv. Este arquivo csv possui 47 campos e várias 10.000 linhas. Para remover duplicatas, usei awk '!seen[$0]++' . No entanto, para classificar, adicionei uma referênci...
20.08.2017 / 12:36
1
resposta

Lidando com dados hash duplicados no arquivo de texto - mantendo uma linha exclusiva e excluindo duplicatas

Graças a esse fórum, consegui processar um arquivo de texto grande contendo nomes de arquivo e hashes e terminar com uma lista de arquivos com hashes idênticos, conforme mostrado abaixo: file_35.txt 8208ad321576b521b23b07b9ba598e5c43b03ec4172...
23.11.2016 / 18:31
2
respostas

Remove linhas duplicadas de vários arquivos json enquanto preserva a estrutura do arquivo

Eu tenho uma pasta com milhares de arquivos json. O conteúdo de cada pasta é algo como isto: file.1424-417982.json file.1424-417995.json file.1424-418013.json file.1424-418015.json (etc.) Alguns dos arquivos contêm linhas duplicadas em ou...
23.11.2016 / 14:14
2
respostas

Mesclar rótulos de linhas com campos duplicados

Eu tenho um arquivo de texto bastante grande (milhares de linhas) no seguinte formato: 123.123 5 123.123 91 156.456 45 233.185 85 233.185 4 257.448 1 455.456 60 455.456 2 A primeira coluna é coordenada ordenada (x.y) e a seg...
07.09.2015 / 09:45
1
resposta

Renomeando arquivos duplicados com o comando Flatten Folders

Este comando irá mover o conteúdo de uma ou mais pastas para a pasta pai. Mas se houver nomes de arquivos idênticos com a mesma extensão, haverá arquivos que serão sobrescritos durante a movimentação. find . - mindepth 2 -type f -exec mv "{}...
16.07.2015 / 18:47
1
resposta

Pesquisa de arquivos descompactados / zipados

Como eu posso procurar por arquivos duplicados que são compactados e descompactados, com o mesmo nome? Eu entendo que posso fazer a pesquisa inicial com o abaixo, no entanto, não sei como canalizar alguns termos de arquivo duplicados ... E...
15.05.2018 / 16:29