CSV-ontdubbelingstool

Ondersteunt deduplicatie van CSV-gegevens voor losse bestanden en batchverwerking, matching op opgegeven kolommen, aangepaste bewaarstrategieën en export van unieke en dubbele gegevens.

Bug melden

Browseruitvoermodus: Je gegevens worden in je browser verwerkt en niet naar de server geüpload.

Snelheid en stabiliteit: De verwerkingssnelheid hangt af van je apparaat en browser. Voor grote batchtaken kan de desktopversie stabieler zijn.

Tool wordt geladen, even geduld...

Als de online tool niet kan laden of uitvoeren, probeer dan de desktoptool. https://tools.yikeaigc.com/

Toolgebruik

Terug naar oude versie

Eerst instellen, dan CSV-dubbelen verwerken

Ondersteunt plakken, één bestand en batchontdubbeling van meerdere bestanden. Controleer dubbelen op alle kolommen of gekozen kolommen en exporteer unieke data, dubbele data of een ZIP-batch.

CSV / TXT Kolommen matchen Batch verpakken Instellingen opslaan

CSV-data importeren

In modus één bestand kun je één bestand uploaden of CSV direct plakken; in batchmodus kun je meerdere bestanden tegelijk kiezen. De lijst toont alleen de eerste 20, maar alle bestanden worden verwerkt.

CSV-bestanden kiezen of slepen Ondersteunt .csv, .txt; bestanden worden alleen lokaal gelezen.

Gekozen bestanden 0 bestanden

Gegevensvoorbeeld -

Resultaatvoorbeeld en download

Bij één bestand kun je unieke en dubbele data apart downloaden; bij batchbestanden blijven bestandsnamen behouden, wordt bij gelijke namen een nummer toegevoegd en alles als ZIP verpakt.

0Aantal bestanden

0Originele datarijen

0Regels na ontdubbelen

0Aantal dubbele rijen

Nog geen resultaten. Importeer eerst data, bevestig de instellingen en klik op ‘Ontdubbelen starten’.

Resultaat enkel bestand -

Voorbeeld unieke data-

Voorbeeld dubbele data-

Reden voor verwijderen-

Batchresultaten -

Bestandsnaam	Originele rij	Na ontdubbeling	Dubbele rijen	Dubbelpercentage	Status

Instructies

Gebruiksinstructies voor de software

CSV-gegevens importeren: kies in de modus voor één bestand een CSV/TXT-bestand om te uploaden, of plak de CSV-inhoud direct; in batchmodus kun je meerdere CSV/TXT-bestanden selecteren. De interface toont alleen de eerste 20 bestanden, maar tijdens de verwerking worden alle bestanden meegenomen.
Gegevens parseren: stel het invoerscheidingsteken, de bestandscodering, of de eerste rij een koprij is en of spaties aan het begin en einde van cellen moeten worden verwijderd in, en klik vervolgens op “Parseervoorbeeld” om kolomnamen en gegevensrijen te bekijken.
Criteria voor ontdubbeling instellen:
- Alle kolommen matchen: wordt als duplicaat beschouwd wanneer alle velden in de hele rij identiek zijn.
- Specifieke kolommen matchen: bepaal duplicaten op basis van sleutelkolommen zoals e-mailadres, mobiel nummer of klant-ID; in batchmodus kun je kolomnummers invoeren.
Bewaarstrategie kiezen:
- Eerste voorkomen behouden: behoudt de rij die eerder in de duplicaatgroep voorkomt.
- Laatste voorkomen behouden: behoudt de rij die later in de duplicaatgroep voorkomt.
- Alle duplicaten verwijderen: alle gegevensrijen binnen de duplicaatgroep worden verplaatst naar het resultaat met dubbele gegevens.
Geavanceerde opties aanpassen: je kunt parameters instellen zoals hoofdlettergebruik, samenvoegen van opeenvolgende witruimte, negeren van leestekens, verwerking van lege waarden, uitvoerscheidingsteken, of dubbele gegevens moeten worden geëxporteerd en of een UTF-8 BOM moet worden toegevoegd.
Instellingen opslaan: voor veelgebruikte regels kun je op “Instellingen opslaan” klikken, zodat ze de volgende keer dat je de tool opent automatisch worden hersteld.
Verwerking starten en downloaden: klik op “Ontdubbeling starten” en bekijk daarna de statistieken en voorbeeldresultaten; bij één bestand kun je het ontdubbelde resultaat en de dubbele gegevens afzonderlijk downloaden, bij batchbestanden kun je een ZIP-archief downloaden.

Veelgestelde vragen

Antwoord: Alle kolommen matchen vereist dat elk veld in de hele rij identiek is om als duplicaat te tellen; specifieke kolommen matchen vergelijkt alleen de geselecteerde sleutelkolommen, bijvoorbeeld alleen de e-mailkolom om te bepalen of een klant dubbel is.

Antwoord: Eerste voorkomen behouden is geschikt om oorspronkelijke records te bewaren; laatste voorkomen behouden is geschikt om bijgewerkte records te bewaren; alle duplicaten verwijderen is geschikt om alleen gegevens over te houden zonder duplicaatrelaties.

Antwoord: De verwerkte bestandsnaam blijft zoveel mogelijk gelijk aan de oorspronkelijke bestandsnaam; als meerdere bestanden dezelfde naam hebben, voegt het systeem een nummer toe aan de bestandsnaam om te voorkomen dat bestanden in het ZIP-pakket elkaar overschrijven.

Antwoord: Ja. Wijzig in de parse-instellingen de bestandscodering naar “GBK / GB18030” en parse daarna de preview. Als er onleesbare tekens verschijnen, kunt u de codering wijzigen en opnieuw parsen.

Antwoord: Dat hangt af van de instelling “Hoofdlettergebruik”. Als “Niet hoofdlettergevoelig” is aangevinkt, worden ABC en abc als dezelfde inhoud vergeleken; als dit is uitgevinkt, worden ze als verschillende inhoud verwerkt.

Antwoord: Na verwerking kunt u overschakelen naar de preview “Dubbele gegevens”, of op “Dubbele gegevens downloaden” klikken om een CSV te exporteren. In batchmodus moet “Dubbele gegevens ook exporteren” worden aangevinkt.