Penyahduplikasian dan Penggabungan Fail TXT

Memproses fail TXT secara pukal, membuang kandungan baris berulang, dan menyokong penggabungan beberapa fail menjadi satu.

Laporan pepijat

Mod pelaksanaan pelayar: Data anda diproses dalam penyemak imbas dan tidak dimuat naik ke pelayan.

Kelajuan dan kestabilan: Kelajuan pemprosesan bergantung pada peranti dan pelayar anda. Untuk kerja kelompok besar, versi desktop mungkin lebih stabil.

Memuatkan alat, sila tunggu...

Jika alat dalam talian tidak dapat dimuatkan atau dijalankan, cuba alat desktop. https://tools.yikeaigc.com/

Penggunaan Alat

Kembali ke versi lama

Versi desktop tersedia dengan ciri yang lebih berkuasa dan stabil. Buka versi desktop

Sahkan peraturan dalam “Tetapan proses” dahulu, kemudian klik mula proses. Sokong tampal teks, pilih fail TXT secara pukal, gabung, nyahduplikasi setiap fail, nyahduplikasi selepas gabung; jika pilih berbilang fail, hanya 20 pertama dipaparkan, tetapi semua fail diproses.

1Input teks

Kotak teks sesuai untuk kandungan sementara; untuk proses banyak fail, beralih ke kawasan fail kanan dan pilih “Fail dipilih” dalam tetapan.

2Input fail

Klik untuk pilih fail, atau seret fail TXT ke sini Sokong fail teks seperti .txt, .log, .md, .csv, .json; tidak dimuat naik ke pelayan.

Operasi ini akan membaca teks atau fail dalam pelayar dan memprosesnya mengikut tetapan. Sila semak “Tetapan proses” sebelum mula.

Bersedia memproses... 0%

Fail diproses

Baris asal

Baris output

Buang pendua

4Butiran proses

Fail/Sumber	Asal	Output	Dibuang	Status
Tiada hasil

Selepas selesai, 20 butiran pertama akan dipaparkan; fail lain juga akan diproses.

5Pratonton hasil

Pratonton hanya memaparkan sebahagian kandungan; fail muat turun menyimpan hasil penuh.

Arahan

Arahan Penggunaan Perisian

Pilih kandungan input: Anda boleh menampal kandungan TXT dalam kotak teks, atau memilih berbilang fail TXT untuk pemprosesan kelompok. Senarai fail hanya memaparkan 20 fail pertama; fail selebihnya tetap akan diproses.
Sahkan julat pemprosesan: Dalam “Tetapan Pemprosesan”, pilih untuk memproses kandungan kotak teks, fail yang dipilih, atau penentuan automatik. Jika terdapat fail, penentuan automatik akan mengutamakan pemprosesan fail.
Pilih mod pemprosesan:
- Nyahduplikasi mengikut fail: Setiap fail akan memadam baris berulang secara berasingan, dan nama fail output mengekalkan nama fail asal; jika terdapat nama yang sama, nombor akan ditambah secara automatik untuk membezakannya.
- Gabung kemudian nyahduplikasi: Gabungkan dahulu berbilang fail atau kandungan teks, kemudian padam baris berulang secara menyeluruh daripada hasil gabungan.
- Gabung sahaja: Gabungkan kandungan mengikut turutan tanpa memadam baris berulang.
Konfigurasikan peraturan nyahduplikasi: Anda boleh menetapkan untuk mengekalkan yang pertama, mengekalkan yang terakhir, atau memadam semua dalam kumpulan berulang, serta memilih peraturan perbandingan seperti huruf besar/kecil, ruang putih, baris kosong, tanda baca, dan penukaran aksara lebar penuh kepada separuh lebar.
Tetapkan parameter output: Anda boleh memilih aksara baris baharu LF atau CRLF, menetapkan jarak antara fail gabungan, nama fail output, sama ada menambah UTF-8 BOM, dan sama ada menambah penanda pemisah fail.
Mulakan pemprosesan dan muat turun: Klik “Mulakan Pemprosesan” untuk melihat statistik, butiran dan pratonton. Pemprosesan mengikut fail akan menjana pakej mampat ZIP, manakala mod gabungan akan menjana fail TXT.

Soalan Lazim

J: Nyahduplikasi mengikut fail akan memproses setiap fail TXT secara berasingan, sesuai untuk mengekalkan hasil bebas bagi setiap fail; gabung kemudian nyahduplikasi akan mengumpulkan kandungan terlebih dahulu, kemudian memadam baris berulang secara menyeluruh, sesuai untuk menyusun data merentas fail seperti senarai nama, kata kunci dan log.

J: Secara lalai, ia ditentukan berdasarkan kandungan keseluruhan baris yang benar-benar sama. Anda juga boleh memilih dalam tetapan untuk mengabaikan huruf besar/kecil, mengabaikan ruang putih di awal dan akhir, memampatkan ruang putih berturutan, mengabaikan tanda baca biasa, atau menukar aksara lebar penuh kepada separuh lebar, supaya kandungan serupa dengan format berbeza dibandingkan mengikut peraturan yang sama.

J: Ya. Alat ini menyediakan tiga pilihan untuk baris kosong: kekalkan baris kosong, hanya kekalkan satu baris kosong, atau padam baris kosong; huruf besar/kecil juga boleh ditetapkan sama ada dibezakan atau diabaikan. Sebelum pemprosesan, sila sahkan peraturan berdasarkan kegunaan data.

Jawapan: Apabila memproses mengikut fail, nama fail asal akan dikekalkan seboleh mungkin. Jika terdapat fail dengan nama yang sama, sistem akan menambah nombor di belakang nama fail, contohnya data.txt, data2.txt, data3.txt, untuk mengelakkan fail dalam pakej mampat saling menindih.

Jawapan: Masa pemprosesan bergantung pada memori peranti, CPU dan jumlah teks keseluruhan. Untuk fail yang besar, anda boleh memprosesnya secara berkelompok; jika kandungan mencapai tahap GB, disarankan untuk mengurangkan bilangan fail bagi setiap pemprosesan dan menutup program yang menggunakan banyak sumber.

Jawapan: Anda boleh memilih UTF-8, GBK, GB18030, Big5 atau UTF-16 LE secara manual dalam “Pengekodan fail”. Pengekodan biasa untuk TXT bahasa Cina ialah UTF-8 atau GBK; tukar pengekodan dan proses semula.

Penyahduplikasian dan Penggabungan Fail TXT

Memuatkan alat, sila tunggu...