Verwijder dubbele regels
Plak een lijst met herhaalde vermeldingen en verwijder duplicaten in één stap. Bewaar de eerste vermelding van elke regel of sorteer alfabetisch na ontdubbeling. Ideaal voor het opschonen van geëxporteerde e-mails, serverlogboeken, taglijsten en voorraad-SKU's. De verwerking blijft lokaal: er wordt niets geüpload.
Invoertekst
Zo verwijder je dubbele regels
1. Plak je tekst: één item per regel.
2. Kies of je de oorspronkelijke volgorde of sorteerregels wilt behouden na het verwijderen van duplicaten.
3. Negeer eventueel hoofdlettergebruik, zodat 'Apple' en 'appel' als dezelfde regel tellen.
4. Kopieer de opgeschoonde uitvoer.
Voorbeelden van ontdubbeling
E-maillijst opschonen
Een mailinglijstexport met 1.200 regels kan 340 duplicaten bevatten. Na ontdubbeling blijven er 860 unieke adressen over in de volgorde van het eerst gezien.
Serverlog unieke IP's
Plak 5.000 logregels en bewaar unieke IP-adressen één per regel — sneller dan sorteren | uniq in een terminal voor een snelle controle.
Taglijst voor een blog
"seo, marketing, SEO, content, marketing" opgesplitst per regel → unieke tags: seo, marketing, content (hoofdletterongevoelige optie voegt SEO en seo samen).
Wanneer gebruik je deze tool
• Wanneer je CSV-exports samenvoegt en unieke waarden in één kolom nodig heeft.
• Wanneer je geplakte lijsten opruimt voordat je deze in een CRM of spreadsheet importeert.
• Wanneer je unieke invoer uit de opdrachtuitvoer wilt zonder een terminal te openen.
Wanneer kies je iets anders
• Wanneer duplicaten meerdere kolommen en rijen beslaan, gebruik dan spreadsheetsoftware of een CSV-tool.
• Als je fuzzy matching nodig heeft ("Jon Smith" versus "John Smith"): deze tool matcht alleen exacte regels.
• Wanneer je twee volledige documenten moet vergelijken, gebruikt je de tekstdifferentiatietool.
Exacte match vs. vage deduplicatie
Deze tool verwijdert regels die teken voor teken identiek zijn (na optionele hoofdletternormalisatie). Er worden "New York" en "New York, NY" of e-mails die in Gmail met een punt verschillen, niet samengevoegd. Voor het ontdubbelen van contactpersonen moet je eerst de indelingen normaliseren: spaties en kleine letters verwijderen, interpunctie verwijderen en vervolgens deduplicatie uitvoeren.
Orderbehoud in datapijplijnen
Het aanhouden van de eerst geziene volgorde is van belang wanneer de lijst de prioriteit of chronologie weerspiegelt. aanmeldingsvolgorde of gerangschikte trefwoorden. Sorteren na ontdubbeling is beter als je een alfabetische index van unieke categorieën nodig heeft. Kies de modus voordat je de uitvoer naar downstream-tools kopieert.
Veelgestelde vragen
Verwijdert het lege regels?
Lege regels kunnen worden behandeld als duplicaten van elkaar. Schakel bijsnijdopties in als je tool het volledig strippen van lege regels ondersteunt.
Is de vergelijking standaard hoofdlettergevoelig?
Normaal gesproken kunt je de hoofdlettergevoeligheid wijzigen. De hoofdletterongevoelige modus behandelt "Error" en "error" als dezelfde regel.
Welk duplicaat wordt bewaard?
Bij het handhaven van de volgorde wordt de eerste keer dat elke unieke regel voorkomt behouden; latere kopieën worden verwijderd.
Kan het zeer grote lijsten aan?
Er zijn browsergeheugenlimieten van toepassing, maar lijsten met tienduizenden korte regels werken doorgaans prima op moderne apparaten.
Verandert het mijn originele bestand?
Nee. Je plakt tekst en kopieert het resultaat; bronbestanden op schijf worden nooit aangeraakt.
Worden gegevens geüpload?
Nee. Deduplicatie verloopt volledig in je browser.