Strumento di deduplicazione CSV

Supporta la rimozione dei duplicati dai dati CSV per file singoli e in batch, con corrispondenza per colonne specificate, strategie di conservazione personalizzate ed esportazione di dati unici e duplicati.

Segnala bug

Modalità di esecuzione nel browser: I tuoi dati vengono elaborati nel browser e non caricati sul server.

Velocità e stabilità: La velocità di elaborazione dipende dal dispositivo e dal browser. Per grandi batch, la versione desktop può essere più stabile.

Caricamento strumento, attendi...

Se lo strumento online non si carica o non funziona, prova lo strumento desktop. https://tools.yikeaigc.com/

Uso dello strumento

Torna alla vecchia versione

Imposta prima, poi rimuovi i duplicati CSV

Supporta dati incollati, file singoli e deduplica batch di più file. Trova duplicati su tutte le colonne o su colonne specifiche ed esporta dati unici, duplicati o ZIP batch.

CSV / TXT Corrispondenza colonne Pacchetto batch Impostazioni salvabili

Importa dati CSV

In modalità file singolo puoi caricare un file o incollare direttamente il CSV; in modalità batch puoi selezionare più file alla volta. L'elenco mostra solo i primi 20, ma l'elaborazione copre tutti i file.

Seleziona o trascina file CSV Supporta .csv, .txt; il contenuto dei file viene letto solo in locale.

File selezionati 0 file

Anteprima dati -

Anteprima e download risultati

Per un singolo file puoi scaricare dati unici e duplicati separatamente; per file multipli si mantengono i nomi originali, si aggiunge un numero in caso di duplicati e si crea un ZIP.

0Numero file

0Righe dati originali

0Righe dopo deduplica

0Righe duplicate

Nessun risultato. Importa i dati, conferma le impostazioni, poi fai clic su “Avvia deduplica”.

Risultato file singolo -

Anteprima dati unici-

Anteprima duplicati-

Motivo rimozione-

Risultati batch -

Nome file	Riga originale	Dopo deduplica	Righe duplicate	Tasso duplicati	Stato

Istruzioni

Istruzioni per l'uso del software

Importare dati CSV: scegli la modalità file singolo per caricare un file CSV/TXT oppure incolla direttamente il contenuto CSV; in modalità batch puoi selezionare più file CSV/TXT, l'interfaccia mostra solo i primi 20 file, ma durante l'elaborazione verranno inclusi tutti i file.
Analizzare i dati: imposta il delimitatore di input, la codifica del file, se la prima riga è l'intestazione e se rimuovere gli spazi iniziali e finali delle celle, quindi fai clic su “Anteprima analisi” per visualizzare i nomi delle colonne e le righe di dati.
Impostare i criteri di deduplicazione:
- Corrispondenza di tutte le colonne: una riga viene considerata duplicata quando tutti i campi dell'intera riga sono identici.
- Corrispondenza di colonne specifiche: determina i duplicati in base a colonne chiave come email, numero di telefono, ID cliente; in modalità batch puoi inserire i numeri delle colonne.
Scegliere la strategia di conservazione:
- Mantieni la prima occorrenza: conserva la riga che appare prima nel gruppo di duplicati.
- Mantieni l'ultima occorrenza: conserva la riga che appare più tardi nel gruppo di duplicati.
- Elimina tutti i duplicati: tutte le righe del gruppo di duplicati vengono spostate nei risultati dei dati duplicati.
Regolare le opzioni avanzate: puoi impostare parametri come gestione di maiuscole/minuscole, unione degli spazi consecutivi, ignorare la punteggiatura, gestione dei valori vuoti, delimitatore di output, esportazione dei dati duplicati e aggiunta di UTF-8 BOM.
Salvare le impostazioni: per le regole usate di frequente puoi fare clic su “Salva impostazioni”; verranno ripristinate automaticamente alla prossima apertura dello strumento.
Avviare l'elaborazione e scaricare: fai clic su “Avvia deduplicazione” per visualizzare statistiche e anteprima dei risultati; per un file singolo puoi scaricare separatamente i risultati deduplicati e i dati duplicati, mentre per i file batch puoi scaricare un archivio ZIP.

Domande frequenti

R: Corrispondenza di tutte le colonne richiede che ogni campo dell'intera riga sia identico per essere considerato duplicato; corrispondenza di colonne specifiche confronta solo le colonne chiave selezionate, ad esempio controlla se un cliente è duplicato solo in base alla colonna email.

R: Mantieni la prima occorrenza è adatto per conservare i record originali; mantieni l'ultima occorrenza è adatto per conservare i record aggiornati; elimina tutti i duplicati è adatto per lasciare solo i dati senza relazioni di duplicazione.

R: Il nome del file elaborato manterrà il più possibile il nome originale; se più file hanno lo stesso nome, il sistema aggiungerà un numero alla fine del nome file per evitare che i file all'interno del pacchetto ZIP si sovrascrivano a vicenda.

R: Sì. Nelle impostazioni di analisi, cambia la codifica del file in “GBK / GB18030”, quindi esegui nuovamente l'anteprima dell'analisi. Se compaiono caratteri illeggibili, puoi cambiare codifica e analizzare di nuovo.

R: Dipende dall'impostazione “Gestione maiuscole/minuscole”. Se selezioni “Non distinguere tra maiuscole e minuscole”, ABC e abc verranno confrontati come lo stesso contenuto; se deselezioni l'opzione, verranno trattati come contenuti diversi.

R: Dopo l'elaborazione, puoi passare all'anteprima “Dati duplicati” oppure fare clic su “Scarica dati duplicati” per esportare il CSV. In modalità batch è necessario selezionare “Esporta anche i dati duplicati”.