CSV 중복 제거 도구
단일 파일 및 일괄 CSV 데이터 중복 제거를 지원하며, 지정한 열 기준으로 매칭하고 보존 전략을 사용자 지정해 고유 데이터와 중복 데이터를 내보낼 수 있습니다.
브라우저 실행 모드: 데이터는 브라우저에서 처리되며 서버에 업로드되지 않습니다.
속도와 안정성: 처리 속도는 기기와 브라우저에 따라 달라집니다. 대량 배치 작업에는 데스크톱 버전이 더 안정적일 수 있습니다.
도구를 불러오는 중입니다. 잠시 기다려 주세요...
도구를 불러오는 중입니다. 잠시 기다려 주세요...
온라인 도구가 로드되거나 실행되지 않으면 데스크톱 도구를 사용해 보세요. https://tools.yikeaigc.com/
도구 사용량
이전 버전으로 돌아가기
먼저 설정한 뒤 CSV 중복 데이터를 처리하세요
데이터 붙여넣기, 단일 파일, 다중 파일 일괄 중복 제거를 지원합니다. 전체 열 또는 지정 열 기준으로 중복을 판단하고 고유 데이터, 중복 데이터 또는 일괄 ZIP을 내보낼 수 있습니다.
CSV / TXT
지정 열 매칭
일괄 압축
설정 저장 가능
CSV 데이터 가져오기
단일 파일 모드는 파일 1개를 업로드하거나 CSV를 직접 붙여넣을 수 있습니다. 일괄 모드는 여러 파일을 한 번에 선택할 수 있으며, 목록에는 처음 20개만 표시되고 처리는 전체 파일에 적용됩니다.
CSV 파일 선택 또는 드래그
지원: .csv, .txt. 파일 내용은 로컬에서만 읽습니다.
선택한 파일
파일 0개
데이터 미리보기
-
파싱, 중복 제거 및 출력 설정
중복 제거를 실행하기 전에 이 설정을 먼저 완료하세요. 단일 파일은 파싱 후 열 이름을 선택할 수 있고, 일괄 모드도 열 번호로 매칭할 수 있습니다.
중복 기준
지정 열 모드에서는 선택한 열 또는 입력한 열 번호만 비교
중복 판단 열 선택
일괄 파일의 열명이 다를 수 있으므로 열 번호가 더 안정적입니다. 비우면 모든 열로 일치합니다.
결과 미리보기 및 다운로드
단일 파일은 고유 데이터와 중복 데이터를 각각 다운로드할 수 있습니다. 여러 파일은 원래 파일명을 유지하고, 이름이 같으면 숫자를 추가해 ZIP으로 묶습니다.
0파일 수
0원본 데이터 행
0중복 제거 후 줄 수
0중복 행 수
아직 처리 결과가 없습니다. 먼저 데이터를 가져오고 설정을 확인한 뒤 “중복 제거 시작”을 클릭하세요.
단일 파일 결과
-
고유 데이터 미리보기-
중복 데이터 미리보기-
제거 사유-
일괄 처리 결과
-
| 파일명 | 원본 행 | 중복 제거 후 | 중복 행 | 중복률 | 상태 |
|---|
안내
소프트웨어 사용 설명
- CSV 데이터 가져오기: 단일 파일 모드를 선택해 CSV/TXT 파일을 업로드하거나 CSV 내용을 직접 붙여넣으세요. 배치 모드에서는 여러 CSV/TXT 파일을 선택할 수 있으며, 화면에는 처음 20개 파일만 표시되지만 처리 시에는 모든 파일이 포함됩니다.
- 데이터 파싱: 입력 구분자, 파일 인코딩, 첫 행을 헤더로 사용할지 여부, 셀 앞뒤 공백 제거 여부를 설정한 다음 “파싱 미리보기”를 클릭해 열 이름과 데이터 행을 확인하세요.
- 중복 제거 기준 설정:
- 전체 열 일치: 행 전체의 모든 필드가一致할 때 중복으로 판단합니다.
- 지정 열 일치: 이메일, 휴대폰 번호, 고객 ID 등 핵심 열을 기준으로 중복을 판단합니다. 배치 모드에서는 열 번호를 입력할 수 있습니다.
- 보존 전략 선택:
- 첫 번째 항목 보존: 중복 그룹에서 더 먼저 나타난 행을 보존합니다.
- 마지막 항목 보존: 중복 그룹에서 더 나중에 나타난 행을 보존합니다.
- 모든 중복 항목 삭제: 중복 그룹 내 데이터 행을 모두 중복 데이터 결과로 이동합니다.
- 고급 옵션 조정: 대소문자 처리, 연속 공백 병합, 문장부호 무시, 빈 값 처리, 출력 구분자, 중복 데이터 내보내기 여부, UTF-8 BOM 추가 여부 등의 매개변수를 설정할 수 있습니다.
- 설정 저장: 자주 사용하는 규칙은 “설정 저장”을 클릭하면 다음에 도구를 열 때 자동으로 복원됩니다.
- 처리 시작 및 다운로드: “중복 제거 시작”을 클릭한 뒤 통계와 미리보기 결과를 확인하세요. 단일 파일은 중복 제거 결과와 중복 데이터를 각각 다운로드할 수 있고, 배치 파일은 ZIP 압축 파일로 다운로드할 수 있습니다.
자주 묻는 질문
답변: 전체 열 일치는 행 전체의 모든 필드가一致해야 중복으로 간주합니다. 지정 열 일치는 선택한 핵심 열만 비교하며, 예를 들어 이메일 열만 기준으로 고객 중복 여부를 판단합니다.
답변: 첫 번째 항목 보존은 원본 기록을 남기기에 적합하고, 마지막 항목 보존은 업데이트된 기록을 남기기에 적합하며, 모든 중복 항목 삭제는 중복 관계가 없는 데이터만 남기기에 적합합니다.
답: 처리된 파일명은 가능한 한 원래 파일명을 유지합니다. 여러 파일의 이름이 중복되면 ZIP 패키지 내 파일이 서로 덮어쓰지 않도록 시스템이 파일명 뒤에 숫자를 추가합니다.
답: 가능합니다. 파싱 설정에서 파일 인코딩을 “GBK / GB18030”으로 변경한 뒤 다시 파싱 미리보기를 실행하세요. 글자가 깨져 보이면 인코딩을 바꾼 후 다시 파싱할 수 있습니다.
답: “대소문자 처리” 설정에 따라 달라집니다. “대소문자 구분 안 함”을 선택하면 ABC와 abc를 동일한 내용으로 비교하고, 선택을 해제하면 서로 다른 내용으로 처리합니다.
답: 처리가 완료된 후 “중복 데이터” 미리보기로 전환할 수 있으며, “중복 데이터 다운로드”를 클릭해 CSV로 내보낼 수도 있습니다. 일괄 모드에서는 “중복 데이터도 함께 내보내기”를 선택해야 합니다.