uniq (Único)

O comando uniq compara cada linha de entrada com a linha anterior. Ele pode agrupar, contar ou selecionar grupos adjacentes de linhas iguais, mas não pesquisa o arquivo inteiro por duplicatas separadas.

Execute uniq sem opção de filtro para mostrar uma linha representativa de cada grupo adjacente:

$ uniq reading.txt
book
paper
article
magazine

O arquivo de entrada permanece inalterado, pois o resultado vai para stdout.

Essas quantidades representam o tamanho de cada sequência, não os totais globais, a menos que todas as linhas iguais tenham sido agrupadas primeiro.

Use -d para mostrar uma linha representativa de cada grupo adjacente que contém mais de uma:

$ uniq -d reading.txt
book
paper
article

O GNU uniq -D mostra todas as linhas dos grupos repetidos, enquanto -d minúsculo mostra o valor de cada grupo uma vez.

Executar uniq nesse arquivo produz um resultado que pode surpreender:

$ uniq reading.txt
book
paper
book
paper
article
magazine
article

Nenhuma linha é agrupada porque os valores vizinhos são diferentes. Ordene primeiro quando a mudança de ordem for aceitável e você quiser reunir linhas completas iguais:

$ sort reading.txt | uniq
article
book
magazine
paper

Use um locale e uma política de comparação consistentes nas duas etapas. sort -u reading.txt também pode ordenar e preservar uma linha para cada chave igual em um único comando.

uniq lê stdin quando nenhum arquivo de entrada é indicado, motivo pelo qual se encaixa naturalmente depois de sort. Opções GNU como -i podem ignorar maiúsculas e minúsculas, enquanto -f, -s e -w podem ignorar ou limitar regiões de comparação; use-as apenas quando a igualdade deva ser definida por parte de cada linha.

Para praticar o agrupamento, a contagem e a filtragem de duplicatas, experimente estes laboratórios:

1. Comando uniq do Linux: Filtragem de Duplicatas — Aprenda a combinar uniq com sort para identificar, filtrar e analisar linhas duplicadas.
2. Comando sort do Linux: Ordenação de Texto — Pratique a organização de linhas com sort, uma etapa importante antes do uso eficaz de uniq.
3. Contagem e Ordenação de Palavras — Aprenda as ferramentas essenciais de processamento de texto do Linux wc (contagem de palavras) e sort neste desafio prático. Aprenda a contar linhas, palavras e caracteres, encontrar padrões frequentes e ordenar dados com eficiência em várias tarefas de análise de texto.