A ferramenta de linha de comando especificada por POSIX uniq foi projetada para "relatar ou filtrar fora linhas repetidas em um arquivo ". Além dos casos de uso que envolvem as linhas completas para comparação, há duas opções para comparaçã...
Eu tenho um arquivo de texto com linhas que são uma mistura como esta:
### Comments
# Comments
86.242.200.81 banana.domain.net # comment
86.242.200.3 orange.domain.net
31.28.225.81 monkey.anotherdomain.net
51.18.33.4 puffin.domain...
Eu estava usando o seguinte comando
curl -silent http://api.openstreetmap.org/api/0.6/relation/2919627 http://api.openstreetmap.org/api/0.6/relation/2919628 | grep node | awk '{print $3}' | uniq
quando me perguntei por que uniq não rem...
Estou tentando combinar os dicionários americano e britânico em um grande dicionário, e estou tentando remover todas as duplicatas do superconjunto, mas parece que o uniq não está emitindo palavras como "épée" ou single letras.
Isso é o que e...
Eu tenho um problema complicado que não consigo resolver.
Eu tenho um arquivo de texto contendo alguns milhões de linhas de texto. Basicamente, quero executar uniq , mas com uma diferença: se duas linhas forem idênticas, mas para um sufixo...
Eu sei que existem "sort" e "uniq" por aí, no entanto, a pergunta de hoje é sobre como utilizar o AWK para fazer esse tipo de trabalho. Diga se eu tenho uma lista de qualquer coisa realmente (ips, nomes ou números) e quero classificá-los;
Aqu...
Eu tenho vários arquivos CSV de 1MB a 6GB gerados pelo script inotify com uma lista de eventos formatados como: timestamp;fullpath;event;size .
Esses arquivos são formatados assim:
timestamp;fullpath;event;size
1521540649.02;/home/wor...
Eu tenho logs muito grandes (vários gigabytes por dia), que podem (mas não precisam) conter linhas específicas. Preciso contar o número de ocorrências de cada uma dessas linhas diariamente.
Eu tenho um arquivo patterns.in , que contém as...
Ok, então eu quero remover linhas duplicadas, mas é um pouco mais complicado do que isso ...
Eu tenho um arquivo chamado users.txt, o exemplo do arquivo é:
users:[email protected]
users1:[email protected]
Agora, devido a um bug no meu...