Toolbox Hub
Alle gereedschappen

Duplicate Line Remover

Remove duplicate lines

Remove duplicate lines Wordt lokaal uitgevoerd in uw browser

One item per line. Duplicates are dropped and the first occurrence keeps its position.

About the

De Duplicate Line Remover verwijdert herhaalde regels uit een tekstblok, waarbij de eerste regel van elke regel behouden blijft en elke latere kopie wordt verwijderd. De volgorde blijft behouden, zodat de resterende lijst de volgorde behoudt die u oorspronkelijk had, wat van belang is als de lijst een reeks stappen of een tijdlijn is. De vergelijking is exact: twee lijnen die één enkele spatie van elkaar verschillen, zijn twee verschillende lijnen, dus eerst de witruimte inkorten is de gebruikelijke oplossing als het resultaat er verkeerd uitziet.

Where people use the

  • Een lijst met e-mailadressen of ID's opschonen vóór een bulkimport.
  • Zoeken naar hoeveel unieke waarden een kolom daadwerkelijk bevat.
  • Het verwijderen van herhaalde logregels voordat u ze in een ticket plakt.
  • Ontdubbeling van een lijst met URL's verzameld uit verschillende bronnen.

How to use the

  1. 1

    Plak je lijst

    Eén artikel per regel. Alles wat door komma's of spaties wordt gescheiden, moet eerst in regels worden opgesplitst.

  2. 2

    Snijd de witruimte indien nodig bij

    Voer de tekst door Text Trimmer voordat u gaat ontdubbelen. Een spatie achteraan is voldoende om twee identiek uitziende lijnen als verschillend te laten gelden.

  3. 3

    Verwijder duplicaten

    De uitvoer bevat elke afzonderlijke regel precies één keer, in de volgorde waarin deze voor het eerst verscheen.

  4. 4

    Vergelijk de tellingen

    Door de regels ervoor en erna te tellen, kun je zien hoeveel duplicaten er waren, wat vaak het eigenlijke antwoord is dat je wilde.

Tips en beste praktijken

  • Knip de witruimte altijd af vóór het ontdubbelen, niet erna.
  • Sorteer eerst als u de duplicaten gegroepeerd wilt zien; sorteer daarna als u de oorspronkelijke volgorde wilt behouden.
  • Bewaar de originele lijst totdat u het aantal regels hebt gecontroleerd, omdat de bewerking niet ongedaan kan worden gemaakt.

Veelgestelde vragen

Welk exemplaar wordt bewaard?

Het eerste voorkomen. Elke latere identieke regel wordt verwijderd. Als u in plaats daarvan de laatste vermelding nodig heeft, keert u de lijst eerst om, ontdubbelt u deze en keert u deze vervolgens weer terug.

Waarom zijn er nog steeds twee identiek ogende lijnen?

Omdat ze eigenlijk niet identiek zijn. Onzichtbare verschillen, zoals een spatie, een tab of een Windows-carriage return op slechts één regel, zorgen ervoor dat ze onderscheidend blijven. Eerst trimmen.

Is de vergelijking hoofdlettergevoelig?

Ja. Appel en appel worden behandeld als twee verschillende lijnen. Converteer eerst de case als u ze wilt samenvoegen.

Kan het duplicaten binnen een enkele regel verwijderen?

Nee. Dit werkt regel voor regel. Voor herhaalde woorden binnen één alinea heb je een andere aanpak nodig.

Hoe groot kan een lijst zijn?

Het wordt begrensd door het geheugen van uw browsertabblad. Lijsten van tienduizenden regels zijn prima; miljoenen niet.

Gerelateerde hulpmiddelen