Công cụ loại bỏ trùng lặp CSV

Hỗ trợ khử trùng lặp dữ liệu CSV cho một tệp hoặc xử lý hàng loạt, có thể khớp theo cột chỉ định, tùy chỉnh chiến lược giữ lại, xuất dữ liệu duy nhất và dữ liệu trùng lặp.

Báo lỗi

Chế độ chạy trên trình duyệt: Dữ liệu của bạn được xử lý trong trình duyệt và không được tải lên máy chủ.

Tốc độ và ổn định: Tốc độ xử lý phụ thuộc vào thiết bị và trình duyệt. Với tác vụ hàng loạt lớn, phiên bản desktop có thể ổn định hơn.

Đang tải công cụ, vui lòng chờ...

Nếu công cụ trực tuyến không tải hoặc chạy được, hãy thử công cụ máy tính. https://tools.yikeaigc.com/

Mức sử dụng công cụ

Quay lại phiên bản cũ

Thiết lập trước, rồi xử lý trùng lặp CSV

Hỗ trợ dán dữ liệu, một tệp và khử trùng lặp hàng loạt nhiều tệp; có thể so trùng theo tất cả cột hoặc cột chỉ định, rồi xuất dữ liệu duy nhất, dữ liệu trùng hoặc ZIP hàng loạt.

CSV / TXT Khớp cột chỉ định Đóng gói hàng loạt Có thể lưu cài đặt

Nhập dữ liệu CSV

Chế độ một tệp có thể tải lên một tệp hoặc dán trực tiếp CSV; chế độ hàng loạt có thể chọn nhiều tệp cùng lúc, danh sách chỉ hiển thị 20 tệp đầu, xử lý sẽ áp dụng cho tất cả tệp.

Chọn hoặc kéo thả tệp CSV Hỗ trợ .csv, .txt; nội dung tệp chỉ được đọc cục bộ.

Tệp đã chọn 0 tệp

Xem trước dữ liệu -

Xem trước & tải kết quả

Với tệp đơn, có thể tải riêng dữ liệu duy nhất và dữ liệu trùng lặp; với nhiều tệp, tên gốc sẽ được giữ, thêm số nếu trùng tên và đóng gói thành ZIP.

0Số tệp

0Dòng dữ liệu gốc

0Số dòng sau khi lọc trùng

0Số dòng trùng

Chưa có kết quả. Vui lòng nhập dữ liệu, xác nhận cài đặt rồi nhấp “Bắt đầu khử trùng”.

Kết quả tệp đơn -

Xem trước dữ liệu duy nhất-

Xem trước dữ liệu trùng lặp-

Lý do loại bỏ-

Kết quả xử lý hàng loạt -

Tên tệp	Dòng gốc	Sau khi loại trùng	Dòng trùng	Tỷ lệ trùng	Trạng thái

Hướng dẫn

Hướng dẫn sử dụng phần mềm

Nhập dữ liệu CSV: Chọn chế độ một tệp để tải lên tệp CSV/TXT, hoặc dán trực tiếp nội dung CSV; ở chế độ hàng loạt có thể chọn nhiều tệp CSV/TXT, giao diện chỉ hiển thị 20 tệp đầu tiên, nhưng khi xử lý sẽ bao gồm tất cả tệp.
Phân tích dữ liệu: Thiết lập dấu phân tách đầu vào, mã hóa tệp, hàng đầu tiên có phải là tiêu đề hay không, có xóa khoảng trắng ở đầu và cuối ô hay không, sau đó nhấp “Xem trước phân tích” để xem tên cột và các hàng dữ liệu.
Thiết lập tiêu chí khử trùng lặp:
- Khớp tất cả cột: Được xác định là trùng lặp khi tất cả trường trong cả hàng giống nhau.
- Khớp cột được chỉ định: Xác định trùng lặp theo các cột khóa như email, số điện thoại, ID khách hàng; ở chế độ hàng loạt có thể nhập số thứ tự cột.
Chọn chiến lược giữ lại:
- Giữ lần xuất hiện đầu tiên: Giữ lại hàng xuất hiện sớm hơn trong nhóm trùng lặp.
- Giữ lần xuất hiện cuối cùng: Giữ lại hàng xuất hiện muộn hơn trong nhóm trùng lặp.
- Xóa tất cả mục trùng lặp: Tất cả hàng dữ liệu trong nhóm trùng lặp sẽ được chuyển vào kết quả dữ liệu trùng lặp.
Điều chỉnh tùy chọn nâng cao: Có thể thiết lập các tham số như xử lý chữ hoa/thường, gộp khoảng trắng liên tiếp, bỏ qua dấu câu, xử lý giá trị rỗng, dấu phân tách đầu ra, có xuất dữ liệu trùng lặp hay không, có thêm UTF-8 BOM hay không.
Lưu cài đặt: Với các quy tắc thường dùng, có thể nhấp “Lưu cài đặt” để tự động khôi phục khi mở công cụ lần sau.
Bắt đầu xử lý và tải xuống: Sau khi nhấp “Bắt đầu khử trùng lặp”, xem thống kê và kết quả xem trước; với một tệp có thể tải riêng kết quả đã khử trùng lặp và dữ liệu trùng lặp, với tệp hàng loạt có thể tải xuống gói nén ZIP.

Câu hỏi thường gặp

Đáp: Khớp tất cả cột yêu cầu mọi trường trong cả hàng đều giống nhau mới được xem là trùng lặp; khớp cột được chỉ định chỉ so sánh các cột khóa đã chọn, ví dụ chỉ dựa vào cột email để xác định khách hàng có trùng lặp hay không.

Đáp: Giữ lần xuất hiện đầu tiên phù hợp để giữ bản ghi gốc; giữ lần xuất hiện cuối cùng phù hợp để giữ bản ghi đã cập nhật; xóa tất cả mục trùng lặp phù hợp khi chỉ muốn giữ lại dữ liệu không có quan hệ trùng lặp.

Đáp: Tên tệp sau khi xử lý sẽ cố gắng giữ nguyên tên tệp gốc; nếu có nhiều tệp trùng tên, hệ thống sẽ thêm số vào cuối tên tệp để tránh các tệp trong gói ZIP ghi đè lên nhau.

Đáp: Có. Trong phần cài đặt phân tích, đổi mã hóa tệp thành “GBK / GB18030”, rồi phân tích và xem trước. Nếu xuất hiện lỗi ký tự, bạn có thể chuyển mã hóa rồi phân tích lại.

Đáp: Phụ thuộc vào cài đặt “Xử lý chữ hoa/chữ thường”. Khi chọn “Không phân biệt chữ hoa/chữ thường”, ABC và abc sẽ được so sánh như cùng nội dung; khi bỏ chọn, chúng sẽ được xử lý như nội dung khác nhau.

Đáp: Sau khi xử lý xong, bạn có thể chuyển sang phần xem trước “Dữ liệu trùng lặp”, hoặc nhấp vào “Tải xuống dữ liệu trùng lặp” để xuất CSV. Ở chế độ hàng loạt, cần chọn “Đồng thời xuất dữ liệu trùng lặp”.