Usuwanie duplikatów i scalanie plików TXT

Przetwarzaj pliki TXT wsadowo, usuwaj zduplikowane wiersze i łącz wiele plików w jeden.

Tryb wykonywania w przeglądarce: Twoje dane są przetwarzane w przeglądarce i nie są przesyłane na serwer.

Szybkość i stabilność: Szybkość przetwarzania zależy od urządzenia i przeglądarki. Przy dużych zadaniach wsadowych wersja desktopowa może być stabilniejsza.

Ładowanie narzędzia, czekaj...

Jeśli narzędzie online nie ładuje się lub nie działa, wypróbuj narzędzie desktopowe. https://tools.yikeaigc.com/

Użycie narzędzia

Wróć do starej wersji

Dostępna jest wersja desktopowa z mocniejszymi i stabilniejszymi funkcjami. Otwórz wersję desktopową

Najpierw potwierdź reguły w „Ustawieniach przetwarzania”, potem kliknij start. Obsługuje wklejanie tekstu, wybór wielu plików TXT, scalanie, deduplikację plików i po scaleniu; przy wielu plikach pokazuje tylko 20 pierwszych, przetwarzane są wszystkie.

1Wpisywanie tekstu

Pole tekstowe jest do tymczasowej obróbki; aby przetworzyć wiele plików, przejdź do obszaru plików po prawej i wybierz „Wybrane pliki” w ustawieniach.

2Pliki wejściowe

Kliknij, aby wybrać pliki, lub przeciągnij tu pliki TXT Obsługuje pliki tekstowe .txt, .log, .md, .csv, .json itp.; nie są wysyłane na serwer.

Ta operacja odczyta tekst lub pliki w przeglądarce i przetworzy je według ustawionych reguł. Sprawdź „Ustawienia”, a potem rozpocznij.

Przygotowanie... 0%

Przetwarzanie pliku

Wiersze źródłowe

Wiersze wyjściowe

Usuń duplikaty

4Szczegóły przetwarzania

Plik/źródło	Oryginał	Wyjście	Usunięto	Stan
Brak wyników

Po zakończeniu pokaże się pierwsze 20 szczegółów; ukryte pliki też zostaną przetworzone.

5Podgląd wyniku

Podgląd pokazuje tylko część treści; pobrany plik zachowa pełny wynik.

Instrukcje

Instrukcja użycia oprogramowania

Wybierz zawartość wejściową: możesz wkleić zawartość TXT w polu tekstowym albo wybrać wiele plików TXT do przetwarzania wsadowego. Lista plików pokazuje tylko pierwszych 20, pozostałe pliki również zostaną przetworzone.
Potwierdź zakres przetwarzania: w „Ustawieniach przetwarzania” wybierz przetwarzanie zawartości pola tekstowego, wybranych plików lub automatyczne wykrywanie. Gdy są dostępne pliki, automatyczne wykrywanie w pierwszej kolejności przetworzy pliki.
Wybierz tryb przetwarzania:
- Usuwanie duplikatów w każdym pliku: każdy plik niezależnie usuwa zduplikowane wiersze, a nazwa pliku wyjściowego pozostaje taka jak oryginalna; w przypadku takiej samej nazwy automatycznie zostanie dodany numer dla odróżnienia.
- Usuwanie duplikatów po scaleniu: najpierw scala wiele plików lub zawartość tekstową, a następnie usuwa zduplikowane wiersze z połączonego wyniku.
- Tylko scalanie: scala zawartość w kolejności, bez usuwania zduplikowanych wierszy.
Skonfiguruj reguły usuwania duplikatów: możesz ustawić zachowanie pierwszego wystąpienia, zachowanie ostatniego wystąpienia lub usunięcie całych grup duplikatów, a także wybrać reguły porównywania dotyczące wielkości liter, spacji, pustych wierszy, interpunkcji, konwersji znaków pełnej szerokości na półszerokości itp.
Ustaw parametry wyjściowe: możesz wybrać znaki końca linii LF lub CRLF, ustawić odstęp między scalanymi plikami, nazwę pliku wyjściowego, czy dodać UTF-8 BOM oraz czy dodać znaczniki rozdzielające pliki.
Rozpocznij przetwarzanie i pobierz: po kliknięciu „Rozpocznij przetwarzanie” zobaczysz statystyki, szczegóły i podgląd. Przetwarzanie plik po pliku wygeneruje archiwum ZIP, a tryb scalania wygeneruje plik TXT.

Często zadawane pytania

O: Usuwanie duplikatów w każdym pliku przetwarza każdy plik TXT osobno i nadaje się do zachowania niezależnych wyników dla każdego pliku; usuwanie duplikatów po scaleniu najpierw zbiera zawartość razem, a następnie usuwa zduplikowane wiersze, co sprawdza się przy porządkowaniu list, słów kluczowych, dzienników i innych danych z wielu plików.

O: Domyślnie porównywana jest pełna zgodność całej treści wiersza. W ustawieniach możesz też wybrać ignorowanie wielkości liter, ignorowanie spacji na początku i końcu, kompresowanie kolejnych spacji, ignorowanie typowej interpunkcji lub konwersję znaków pełnej szerokości na półszerokości, aby podobne treści w różnych formatach były porównywane według tych samych reguł.

O: Tak. Narzędzie oferuje trzy sposoby obsługi pustych wierszy: zachowanie pustych wierszy, zachowanie tylko jednego pustego wiersza lub usunięcie pustych wierszy; wielkość liter można również rozróżniać albo ignorować. Przed przetwarzaniem potwierdź reguły zgodnie z przeznaczeniem danych.

Odp.: Podczas przetwarzania plik po pliku narzędzie stara się zachować oryginalne nazwy plików. Jeśli pojawią się pliki o tej samej nazwie, system doda do nazwy numer, np. data.txt, data2.txt, data3.txt, aby uniknąć wzajemnego nadpisywania plików w archiwum.

Odp.: Czas przetwarzania zależy od pamięci urządzenia, CPU i łącznej ilości tekstu. Duże pliki można przetwarzać partiami; jeśli zawartość osiąga rozmiar w GB, zaleca się zmniejszenie liczby plików w jednym przetwarzaniu i zamknięcie programów zużywających dużo zasobów.

Odp.: W polu „Kodowanie pliku” możesz ręcznie wybrać UTF-8, GBK, GB18030, Big5 lub UTF-16 LE. Typowe kodowania chińskich plików TXT to UTF-8 lub GBK; po zmianie kodowania wystarczy przetworzyć plik ponownie.