브라우저 실행 모드: 데이터는 브라우저에서 처리되며 서버에 업로드되지 않습니다.
속도와 안정성: 처리 속도는 기기와 브라우저에 따라 달라집니다. 대량 배치 작업에는 데스크톱 버전이 더 안정적일 수 있습니다.
도구를 불러오는 중입니다. 잠시 기다려 주세요...
도구를 불러오는 중입니다. 잠시 기다려 주세요...
온라인 도구가 로드되거나 실행되지 않으면 데스크톱 도구를 사용해 보세요. https://tools.yikeaigc.com/
도구 사용량
이전 버전으로 돌아가기
먼저 매개변수를 설정한 후 텍스트 중복 제거
텍스트 붙여넣기, TXT 파일 일괄 선택, 줄별 중복 제거, 빈 줄 제거, 대소문자 무시, 순서 유지 또는 재정렬, 자주 쓰는 설정 저장을 지원합니다.
로컬 처리
TXT 일괄
ZIP 다운로드
설정 저장 가능
입력 방식 선택
간단한 내용은 바로 붙여넣으세요. 원본 파일명을 유지하거나 일괄 처리하려면 TXT 파일을 선택하세요.
예시 데이터
팁: 먼저 데이터를 불러오거나 입력한 뒤 매개변수 페이지에서 중복 제거 규칙을 확인하세요.
선택한 파일
아직 TXT 파일을 선택하지 않았습니다.
중복 제거 규칙 설정
먼저 매개변수를 설정한 뒤 처리를 클릭하세요. 자주 쓰는 설정은 저장되며 다음에 열 때 자동 복원됩니다.
각 줄 앞뒤 공백 문자를 제거해 같은 내용의 줄을 쉽게 식별합니다.
빈 줄을 제거합니다. 끄면 빈 줄도 중복 제거에 포함되어 하나가 유지됩니다.
Apple, APPLE, apple을 같은 줄 내용으로 판단합니다.
연속된 여러 공백이나 탭을 하나의 공백으로 비교하며, 복사한 데이터 정리에 적합합니다.
UTF-8 BOM 등 숨은 문자를 정리해 첫 줄 오류를 줄입니다.
처음 나타난 위치를 유지합니다. 끄면 텍스트 규칙에 따라 다시 정렬됩니다.
일괄 파일 모드는 기본적으로 원본 파일명으로 출력합니다. 여러 파일명이 같으면 ZIP 안에서 자동으로 (1), (2)가 추가되어 구분됩니다.
처리 결과
통계와 앞부분 결과 미리보기를 확인하고, 개별 파일 또는 ZIP 압축 파일을 다운로드할 수 있습니다.
0%
0
원본 행 수
0
중복 제거 후 줄 수
0
삭제 줄 수
0%
중복 제거율
결과 미리보기
아직 처리되지 않았습니다. 먼저 “규칙 설정”에서 중복 제거를 시작하세요.
안내
소프트웨어 사용 안내
- 입력 방식 선택: 텍스트 내용을 직접 붙여넣거나 하나 이상의 TXT 파일을 선택해 일괄 처리할 수 있습니다. 일괄 파일 모드는 원본 파일명을 유지하며, 이름이 중복되면 숫자를 자동으로 추가해 구분합니다.
- 예시 데이터 사용: 이름 목록, 이메일 주소, 키워드 목록 또는 혼합 데이터 버튼을 클릭해 예시를 불러오고 먼저 중복 제거 효과를 확인할 수 있습니다.
- 중복 제거 규칙 설정:
- 앞뒤 공백 제거: 각 줄의 시작과 끝에 있는 공백 문자를 정리합니다.
- 빈 줄 삭제: 빈 줄을 자동으로 제거합니다. 끄면 빈 줄도 중복 제거 대상에 포함됩니다.
- 대소문자 무시: Apple, APPLE, apple을 같은 내용으로 판단합니다.
- 연속 공백 병합: 여러 개의 연속 공백이나 탭을 하나의 공백으로 비교합니다.
- 원래 순서 유지: 내용이 처음 나타난 위치 순서대로 출력합니다. 끄면 텍스트 규칙에 따라 정렬할 수 있습니다.
- 파일 인코딩 선택: TXT 파일 상태에 따라 UTF-8, GB18030/GBK/GB2312, Big5 또는 ISO-8859-1을 선택하세요. 중국어가 깨져 보이면 인코딩을 바꿔 다시 시도할 수 있습니다.
- 처리 시작: 설정을 완료한 후 “중복 제거 처리 시작”을 클릭하면 도구가 통계 정보와 결과 미리보기를 생성합니다.
- 결과 다운로드: 단일 결과는 바로 다운로드할 수 있으며, 여러 TXT 파일을 처리한 후에는 “전체 결과 다운로드”를 클릭해 ZIP 압축 파일을 받을 수 있습니다.
자주 묻는 질문
답변: 도구는 기본적으로 줄 단위로 중복 내용을 판단하며, 같은 줄 내용이 여러 번 나타나면 하나만 유지합니다. 대소문자 무시, 앞뒤 공백 제거, 연속 공백 병합 등의 규칙을 켜서 실제 데이터에 더 적합한 방식으로 판단할 수도 있습니다.
답변: TXT 파일을 일괄 처리한 후에는 가능한 한 원본 파일명을 유지합니다. 여러 파일의 이름이 같을 경우 결과가 서로 덮어쓰이지 않도록 시스템이 파일명 뒤에 숫자를 추가합니다. 예: data.txt, data (1).txt.
답변: 영어 키워드, 이메일, 계정, 코드 목록 등의 데이터에 적합합니다. 예를 들어 대소문자 무시를 켜면 User@Example.com과 user@example.com은 중복 콘텐츠로 간주됩니다.
답변: 원래 순서 유지는 콘텐츠가 처음 나타난 위치에 따라 출력되며, 명단, 기록, 수작업으로 정리한 데이터에 적합합니다. 정렬 출력은 중복 제거 후의 콘텐츠를 다시 배열하며, 키워드 목록, 단어장, 통일된 순서가 필요한 데이터에 적합합니다.
답변: 글자가 깨지는 현상은 보통 파일 인코딩이 맞지 않기 때문입니다. 중국어 TXT 파일은 GB18030/GBK/GB2312를 선택해 보고, 일반 UTF-8 파일은 UTF-8을 선택하면 됩니다.
답변: 아니요. 텍스트 읽기, 중복 제거, 통계, 미리보기, 패키징은 모두 로컬에서 완료되며, 파일 내용은 서버로 전송되지 않습니다.