Perguntas sobre 'uniq'

O comando uniq exclui linhas repetidas em um arquivo. O comando uniq lê a entrada padrão ou um arquivo especificado pelo parâmetro InFile
2
respostas

Imprime linhas de log excluindo linhas anteriormente repetitivas?

Se eu tivesse um arquivo de log com esta aparência: A A B C C C A B B Eu gostaria de produzir (remover as duplicatas imediatamente sucessivas): A B C A B Como faço isso?     
13.06.2015 / 18:11
1
resposta

Linhas exclusivas baseadas no primeiro campo

Como você pode encontrar linhas exclusivas ou linhas duplicadas em um arquivo com base no conteúdo do primeiro campo ou nos primeiros n caracteres? O comando uniq no OS X não possui a opção -w disponível no Linux: -w, --check-chars=N : co...
01.10.2012 / 09:15
3
respostas

remove linhas com o mesmo valor em uma determinada coluna

Eu tenho o arquivo de entrada (classificado pela coluna 2 com -t,): TOP,25424242,T0137,0.08,0.06,0.02,24 TOP,25424242,T0138,0.07,0.06,0.01,24 TOP,17236110,T0138,9.65,9.37,0.28,89 TOP,23525255,T0137,0.40,0.30,0.11,24 TOP,23525255,T0138,0.08,0....
21.12.2017 / 10:54
4
respostas

Mantendo as linhas repetidas um número definido de vezes [duplicado]

Eu tenho um arquivo com várias colunas e identifiquei linhas nas quais os valores da coluna 3 foram duplicados. Exemplo de entrada: A B C 1 2 APPLE 3 4 PEAR 9 3 LEMON 8 3 ORANGE 8 2 APPLE 3 4 APPLE 9 3 LEMON 8 3 PEAR Posso contar c...
27.09.2017 / 12:27
1
resposta

atribui identificador uniq ou número de série para duplicar ou valores uinq com base em qualquer coluna

Eu tenho um arquivo de entrada como este que tem valores duplicados, eu quero dar uniq identificador para cada valor uniq com base na primeira coluna (col1) mins linhas duplicadas têm mesmo identificador antes do ponto decimal baseado no valor d...
21.11.2017 / 09:40
1
resposta

Por que esse comando não é classificado com base na contagem uniq?

Eu tenho linhas em um log semelhante a: 2015/11/02-07:55:39.735 INFO failed with ERR_AUTHORIZATION_REQUIRED. (10.10.10.11:61618) is not a trusted source. 2015/11/02-07:55:40.515 INFO failed with ERR_AUTHORIZATION_REQUIRED. (10.10.10.11:5183...
02.11.2015 / 18:10
2
respostas

Imprime linhas duplicadas com base na primeira coluna

Eu quero obter linhas onde a primeira coluna é duplicada (usei o número 32 porque a primeira coluna tem sempre 32 caracteres). Até agora eu descobri: sort | uniq -d -w 32 filename O problema é que eu quero as duas linhas, não apenas uma....
12.11.2015 / 11:22
2
respostas

Obtendo o tamanho das pastas pai ao usar find para procurar por critérios?

Eu estou procurando por uma determinada expressão regular dentro dos nomes de arquivos e estou procurando retornar as pastas pai com seus tamanhos de uma maneira única. Por exemplo, aqui está o comando que eu esperava para funcionar: find...
21.08.2014 / 07:22
1
resposta

Como você conta a primeira coluna gerada a partir do uniq -c

Eu tenho um arquivo que lista 5 linhas de palavras aleatórias "Ver ponto" "Ver pote de corrida", etc cada uma em uma nova linha. Consegui criar um código que contava o número de vezes que cada palavra aparece no arquivo e classificada corretamen...
27.04.2018 / 20:15
2
respostas

Usando os primeiros [N] caracteres ao verificar se há duplicatas

Eu tenho um conjunto de dados no arquivo: AAAPOL.0001 AAAPOL.0002 AAAPRO.0001 AAAPRO.0002 AAAPRO.0003 AAAPRO.0004 AAAXEL.0002 AAAJOK.1111 AAAJOK.2222 Eu só preciso da primeira ocorrência usando o padrão dos primeiros 6 car...
13.10.2016 / 07:20