Remover duplicatas mantendo a ordem em Python
Nesta lição, você vai remover os valores repetidos de uma lista mantendo a ordem da primeira ocorrência de cada um.
Introdução
O problema
Dados muitas vezes têm repetições: o mesmo email cadastrado duas vezes, a mesma tag acrescentada de novo. Converter para set tira as repetições, mas sets perdem a ordem original, que importa em coisas como a ordem em que as pessoas se cadastraram.
Pense assim
Tirar repetidos mantendo a ordem é como o livro de visitas de uma festa. Quando cada convidado chega, você confere a lista de nomes já escritos. Se o nome é novo, você escreve; se já está lá, você pula. O livro mantém a ordem de chegada.
seen = set()📖 Os nomes já escritosvalue in seen🔎 Esse convidado já está no livro?seen.add(value)✍️ Escreva o nome de um convidado novounique📋 Convidados em ordem de chegada: [1, 2, 3, 4]Tirar repetidos preservando a ordem mantém a primeira ocorrência de cada valor e descarta as repetições seguintes.
Pontos-chave
seené um set que lembra quais valores já apareceram.value in seené uma verificação rápida de um valor que já foi mantido.seen.add(value)devolve None, entãovalue in seen or seen.add(value)é False para valores novos e os acrescenta ao mesmo tempo.uniqueé[1, 2, 3, 4], na ordem em que os valores apareceram pela primeira vez.
Quando usar?
- Limpar listas de emails, IDs ou tags mantendo a ordem.
- Praticar sets para verificações rápidas de pertencimento.
- Tirar eventos ou linhas de log repetidos.
Quando não é preciso
- A ordem não importa:
set(values)é mais curto. - A legibilidade importa mais que uma linha só:
list(dict.fromkeys(values))ou um laço normal é mais claro que o truque doseen.add.
Código de exemplo
values = [1, 2, 1, 3, 2, 4]
seen = set()
# Add each value only on its first occurrence.
unique = [value for value in values if not (value in seen or seen.add(value))]
print(unique)
Resultado da execução
[1, 2, 3, 4]
Explicação do código
A list comprehension só mantém value se a condição not (value in seen or seen.add(value)) for verdadeira. Na primeira ocorrência, value in seen é False, então seen.add(value) é chamado para registrá-lo. Como add() retorna None, a condição final é True e o valor é mantido. Nas ocorrências seguintes, value in seen é True e o valor é ignorado.
Altere os valores e execute o programa no compilador Python online CodeUtility sem instalar Python.
Exercícios práticos
Tente modificar o código seguindo as sugestões abaixo. Mudar o código e observar o resultado ajuda você a entender muito mais do que só ler.
- Mude os dados de entrada e tente prever o resultado antes de executar.
- Adicione uma verificação para dados vazios ou inválidos.
- Coloque a lógica em uma função separada e teste com vários conjuntos de dados.
Erros comuns
Usar um set quando a ordem importa
Sets não mantêm a ordem de inserção.
unique = list(set(values)) # order is not guaranteed
unique = list(dict.fromkeys(values))
Terminou esta lição?
Marque como aprendida para acompanhar seu progresso.
Pratique com um desafio
Use o conteúdo desta lição para resolver um problema real. Cada desafio roda no navegador, com testes instantâneos e uma revisão por IA.
Todos os desafios