De acordo com as Leis 12.965/2014 e 13.709/2018, que regulam o uso da Internet e o tratamento de dados pessoais no Brasil, ao me inscrever na newsletter do portal DICAS-L, autorizo o envio de notificações por e-mail ou outros meios e declaro estar ciente e concordar com seus Termos de Uso e Política de Privacidade.
Vídeos Canal Programação Shell Linux
Dica do Dia
Como encontrar e manipular linhas duplicadas no Linux
No ecossistema Unix/Linux, a tarefa de identificar ou remover linhas duplicadas é um exemplo clássico de como pequenos utilitários trabalhando juntos resolvem problemas complexos. Se você lida com logs, listas de e-mails ou extração de dados, dominar o sort e o uniq é indispensável.
O comando principal para lidar com duplicatas é o uniq. No entanto, ele possui uma característica importante: o uniq só compara linhas adjacentes. Por isso, quase sempre o utilizaremos em conjunto com o sort.
1. Filtrando apenas as linhas que se repetem
Se você tem um arquivo e precisa saber quais entradas aparecem mais de uma vez, utilize a opção -d (duplicated):
$ sort arquivo.txt | uniq -d
Últimas Dicas
- Como encontrar e manipular linhas duplicadas no Linux
- Erro 403 Forbidden no Apache - o problema ignorado dos Links Simbólicos
- Por que o open source venceu onde o Unix comercial fracassou
- Software livre e descentralização: a verdadeira fundação do Bitcoin
- A Filosofia do Unix: a base silenciosa que moldou a Metodologia Ágil, o DevOps e diversas práticas modernas de desenvolvimento de software
- A Filosofia do Unix: A arte da simplicidade que ainda transforma o mundo da tecnologia
- Extração de dados de PDF com IA Generativa em uma pipeline de dados
- 29 anos de Dicas-L: conhecimento livre, autonomia e comunidade
- 29 anos de Dicas-L: conhecimento livre, autonomia e comunidade
- O protocolo que o sistema não consegue dar "kill -9"
Dicas mais populares
Agenda Livre
Programação de eventos
- Gestão FINANCEIRA e EMPRESARIAL Descomplicada com Eloni José Salvi | BatePapoNerd
- Encontro Presencial: A Revolução da Private AI e o Impacto nos Negócios – 26 de março em Curitiba
- Scrum Reborn! – ebook do Cesar Brod para o Kindle
- SouDevCon 2025 abre inscrições com desconto exclusivo para a comunidade DiCAS-L
- Encontro Presencial: 20 de Março Palestra: Desenvolvimento Turbinado: Como as IDEs com IA Estão Revolucionando o Desenvolvimento