Wat deze remove duplicates doet
Deze Nederlandstalige eliminador de duplicados verwijdert dubbele regels of items uit elke lijst — of het nu gaat om e-mailadressen, CSV-waarden of gekopieerde logregels. Veel mensen zoeken naar manieren om duplicaten te verwijderen in Excel of Google Sheets, maar voor vrije tekstlijsten en data-exports buiten spreadsheets biedt deze tool een snellere, browsergebaseerde oplossing. De originele volgorde blijft standaard intact: jouw prioriteitsrangschikking gaat niet verloren door een automatische sortering. Een veelvoorkomende valkuil bij eenvoudige deduplicatie — zoals [...new Set(items)] in JavaScript — is dat ' appel' en 'appel' als twee verschillende waarden worden beschouwd omdat de spatie vooraan niet wordt weggeknipt. De trim-optie hier lost dat probleem op. 100% client-side — jouw gegevens verlaten nooit je browser. Geen uploads, geen tracking, geen serverlogs. Zie ook de ECMA-404 JSON standaard als je begrijpt waarom primitieve waardenvergelijking belangrijk is bij set-operaties.
Functies
- Volgorde bewaren. De eerste verschijning van elk item blijft staan; de rest wordt verwijderd. Zo blijft je prioriteitsrangschikking intact — iets wat Excel's ingebouwde functie ook doet, maar online tools vaak niet.
- Flexibel scheidingsteken. Kies tussen nieuwe regel, komma of puntkomma. Handig voor zowel regelgebaseerde lijsten als kommagescheiden waarden uit een CSV-export.
- Whitespace trimmen. Verwijdert leading en trailing spaties vóór vergelijking. Zo worden ' appel' en 'appel' correct als duplicaat herkend — de stille fout die
[...new Set(arr)]niet afvangt. - Hoofdlettergevoeligheid instellen. Schakel hoofdlettergevoeligheid uit om 'Email', 'email' en 'EMAIL' als hetzelfde item te beschouwen. Essentieel bij het opschonen van e-maillijsten of gebruikersnamen.
- Optioneel alfabetisch sorteren. Als volgorde er niet toe doet, kun je de uitvoer direct alfabetisch laten sorteren voor eenvoudiger scannen en vergelijken.
- Teller voor invoer, uitvoer en verwijderd. Direct inzicht in hoeveel items er waren, hoeveel er uniek zijn en hoeveel duplicaten er zijn verwijderd — handig voor rapportage of kwaliteitscontrole.
Zo gebruik je de remove duplicates
Plak je lijst, kies je opties en kopieer het resultaat. Geen installatie, geen account.
- Plak je lijst. Kopieer je items — e-mailadressen, trefwoorden, logregels — en plak ze in het invoerveld.
- Kies het scheidingsteken. Selecteer 'Nieuwe regel' voor regelgebaseerde lijsten, 'Komma' voor CSV-waarden of 'Puntkomma' voor andere exports. In Python gebruik je
list(dict.fromkeys(items))voor hetzelfde resultaat met behoud van volgorde. - Stel trim en hoofdlettergevoeligheid in. Zet 'Witruimte verwijderen' aan om spatieproblemen op te lossen. Schakel 'Hoofdlettergevoelig' uit als je e-mailadressen of gebruikersnamen dedupliceert.
- Controleer de tellerss. Bekijk hoeveel items er waren, hoeveel er overblijven en hoeveel er zijn verwijderd.
- Kopieer het resultaat. Klik op 'Kopiëren' en plak de ontdubbelde lijst direct in je spreadsheet, database of mailing-tool. Wil je daarna ook hoofdletters standaardiseren? De [case converter](/nl/case-converter/) doet dat in één stap.
Veelvoorkomende toepassingen
- E-maillijsten opschonen. Verwijder dubbele adressen vóór import in nieuwsbrieftools zoals Mailchimp of Klaviyo. Ongeldige duplicaten kosten geld per verzending en verslechteren je deliverability-score.
- CSV-kolommen ontdubbelen. Na het samenvoegen van meerdere data-exports bevatten kolommen vaak herhaalde waarden. Kopieer de kolom, ontdubbel, plak terug — sneller dan 'duplicaten verwijderen' in Excel of Google Sheets.
- Logregels samenvatten. Gekopieerde serverlogregels bevatten vaak tientallen identieke foutmeldingen. Filter de unieke regels om het echte probleem snel te isoleren.
- Trefwoord- en taglijsten bouwen. Bij het samenvoegen van kommagescheiden trefwoorden uit meerdere bronnen ontstaan snel duplicaten. Gebruik het kommascheidingsteken en schakel hoofdlettergevoeligheid uit voor een schone lijst. Daarna kun je met [text diff](/nl/text-diff/) twee versies vergelijken.
- Unieke waarden uit spreadsheets halen. Wil je snel duplicaten zoeken of verwijderen zonder Excel-formules? Kopieer de celwaarden, plak ze hier en exporteer het resultaat terug — ook handig als alternatief voor 'delete duplicate rows' in Google Sheets.
Veelgestelde vragen
Worden mijn gegevens ergens opgeslagen of verstuurd?
Nee. De tool werkt volledig in je browser; er wordt geen enkel teken naar een server gestuurd. Er zijn geen uploads, geen logs en geen cookies met persoonsgegevens. Dat geldt ook voor gevoelige lijsten zoals e-mailadressen of wachtwoorden — hoewel NIST SP 800-63B aanraadt wachtwoorden nooit in plaintext tools te verwerken.
Waarom herkent de tool ' appel' en 'appel' niet als duplicaat?
Zonder de trim-optie worden leading en trailing spaties meegewogen in de vergelijking. Zet 'Witruimte verwijderen' aan, dan worden beide waarden vóór vergelijking genormaliseerd en correct als duplicaat herkend.
Wat is het verschil met duplicaten verwijderen in Excel of Google Sheets?
Excel en Google Sheets werken rij- of kolomgebaseerd en vereisen een spreadsheetstructuur. Deze tool werkt op vrije tekst: plak elke lijst — ongeacht herkomst — en krijg direct een ontdubbeld resultaat, inclusief tellers en trim-optie.
Blijft de volgorde van mijn items bewaard?
Ja, standaard blijft de eerste verschijning van elk item staan in de originele volgorde. Alleen als je 'Alfabetisch sorteren' aanzet, wordt de volgorde aangepast.
Hoe groot kunnen lijsten zijn die ik kan verwerken?
Voor de meeste gevallen — tot tienduizenden items — werkt de tool probleemloos. Bij zeer grote lijsten (100.000+ items) kan de browser even pauzeren omdat de verwerking op de main thread plaatsvindt. In zulke gevallen is een scriptoplossing zoals sort file.txt | uniq in bash doorgaans sneller.
Kan ik kommagescheiden waarden ontdubbelen in plaats van regelgebaseerde?
Ja. Kies 'Komma' of 'Puntkomma' als scheidingsteken. De tool splitst de invoer dan op dat teken, dedupliceert en voegt het resultaat weer samen met hetzelfde scheidingsteken.