Duplicate Line Remover
Remove duplicate lines
Remove duplicate lines Executa localmente no seu navegador
One item per line. Duplicates are dropped and the first occurrence keeps its position.
About the
O Removedor de Linha Duplicada exclui linhas repetidas de um bloco de texto, mantendo a primeira ocorrência de cada linha e descartando todas as cópias posteriores. A ordem é preservada, portanto a lista restante mantém a sequência que você tinha originalmente, o que é importante quando a lista é um conjunto de etapas ou uma linha do tempo. A comparação é exata: duas linhas que diferem por um único espaço à direita são duas linhas diferentes, portanto, cortar primeiro o espaço em branco é a solução usual quando o resultado parece errado.
Where people use the
- Limpar uma lista de endereços de e-mail ou IDs antes de uma importação em massa.
- Descobrir quantos valores exclusivos uma coluna realmente contém.
- Remover linhas de log repetidas antes de colá-las em um ticket.
- Desduplicar uma lista de URLs coletados de diversas fontes.
How to use the
- 1
Cole sua lista
Um item por linha. Qualquer coisa separada por vírgulas ou espaços precisa primeiro ser dividida em linhas.
- 2
Apare os espaços em branco, se necessário
Passe o texto pelo Text Trimmer antes de desduplicar. Um espaço à direita é suficiente para fazer com que duas linhas de aparência idêntica sejam consideradas diferentes.
- 3
Remover duplicatas
A saída contém cada linha distinta exatamente uma vez, na ordem em que apareceu pela primeira vez.
- 4
Compare as contagens
Contar as linhas antes e depois informa quantas duplicatas havia, o que geralmente é a resposta real que você queria.
Dicas e práticas recomendadas
- Sempre corte os espaços em branco antes de desduplicar, não depois.
- Classifique primeiro se quiser ver as duplicatas agrupadas; classifique depois se desejar que a ordem original seja preservada.
- Mantenha a lista original até verificar a contagem de linhas, pois a operação não pode ser desfeita.
Perguntas frequentes
Qual cópia é mantida?
A primeira ocorrência. Cada linha idêntica posterior é removida. Se você precisar da última ocorrência, inverta a lista primeiro, desduplique e depois reverta.
Por que duas linhas de aparência idêntica ainda estão lá?
Porque eles não são realmente idênticos. Diferenças invisíveis, como um espaço à direita, uma tabulação ou um retorno de carro do Windows em apenas uma linha, irão mantê-los distintos. Apare primeiro.
A comparação diferencia maiúsculas de minúsculas?
Sim. Maçã e maçã são tratadas como duas linhas diferentes. Converta o caso primeiro se quiser mesclá-los.
Ele pode remover duplicatas em uma única linha?
Não. Isso funciona linha por linha. Para palavras repetidas dentro de um parágrafo, você precisa de uma abordagem diferente.
Quão grande é a lista que ele pode suportar?
É limitado pela memória da guia do seu navegador. Listas de dezenas de milhares de linhas são adequadas; milhões não são.