Narzędzie do masowego filtrowania i przetwarzania URL-i

Masowo wyodrębniaj adresy URL z tekstu TXT, filtruj i usuwaj duplikaty według domeny, rozszerzenia i protokołu.

Tryb wykonywania w przeglądarce: Twoje dane są przetwarzane w przeglądarce i nie są przesyłane na serwer.

Szybkość i stabilność: Szybkość przetwarzania zależy od urządzenia i przeglądarki. Przy dużych zadaniach wsadowych wersja desktopowa może być stabilniejsza.

Ładowanie narzędzia, czekaj...

Jeśli narzędzie online nie ładuje się lub nie działa, wypróbuj narzędzie desktopowe. https://tools.yikeaigc.com/

Użycie narzędzia

Wróć do starej wersji

Najpierw ustaw filtrowanie i wyjście, potem rozpocznij. Zawartość plików jest odczytywana, analizowana i pakowana tylko na tej stronie; przy wyborze zbiorczym interfejs pokazuje pierwsze 20, a przetwarzane są wszystkie wybrane pliki.

Nie wybrano danych Reguły domyślne Wyjście domyślne

1Wybierz TXT lub plik tekstowy

Kliknij, aby wybrać pliki, lub przeciągnij je tutaj Obsługuje pliki tekstowe TXT, CSV, LOG, HTML, JSON itp.; można też wybrać folder do odczytu zbiorczego.

Jeśli wybierzesz wiele plików, podgląd pokaże tylko pierwsze 20; przetwarzanie i pakowanie obejmie wszystkie.

2Przegląd plików

Wybrane pliki0

Rozmiar pliku0 KB

Liczba wyświetlanych0

Tryb źródłaPlik

Wybierz plik, wklej tekst URL lub wczytaj dane przykładowe.

3Wklej listę URL

4Dane przykładowe

1Sposób analizy i wynik

Tryb wyodrębniania

Dla tekstu mieszanego wybierz „Wyodrębnij wszystkie URL”.

Kodowanie tekstu

Filtr protokołu

Domena głównaexample.com Pełna domenawww.example.com Protokół + domenahttps://www.example.com Pełny URLZachowaj ścieżkę, parametry opcjonalne Oryginalny fragmentWyodrębniony oryginalny tekst Sufiks domenycom / com.cn

2Sufiksy domen i reguły hosta

Sposób filtrowania sufiksów

Niestandardowy sufiks

Popularne sufiksy

Wymagaj sufiksu domenyFiltruj hosty lokalne, np. localhost Zachowaj adresy IPObsługa hostów IPv4 / IPv6 Usuń początkowe www.Ujednolić format domen

3Słowa kluczowe, ścieżki i duplikaty

Domena zawiera słowa kluczowe

Domena wyklucza słowa kluczowe

Ścieżka zawiera słowa kluczowe

Zakres deduplikacji

Podstawa deduplikacji

Sortowanie wyników

1Struktura plików wyjściowych

Tryb wyjścia

Wyjście osobno zachowa nazwy plików; duplikaty dostaną numer.

Format wyników

Separator kolumn

Protokół wyjściowy

Pełne parametry URL

Pusty plik wynikowy

2ZIP i dodatkowe pliki

Nazwa pliku ZIP

Nazwa pliku scalonych wyników

Generuj raport statystykFormat CSV, liczba dla każdego pliku Generuj nierozpoznane fragmentyUłatwia diagnozę nieprawidłowych URL Dodaj BOM do CSVUłatwia arkuszom rozpoznanie chińskiego

Upewnij się, że źródło danych, filtry i ustawienia wyjścia są gotowe. Po kliknięciu start wszystkie wybrane pliki zostaną przetworzone na tej stronie i powstanie pakiet ZIP do pobrania.

Oczekuje0%

Skanowanie pliku0

Znaleziono URL0

Spełnia warunki0

Usuń duplikaty0

Plik wyjściowy0

PodglądWynik przetwarzania

Nie przetworzono

Nr	Plik źródłowy	Treść wyjściowa	Sufiks	Status
Jeszcze nie przetworzono. Najpierw dokończ ustawienia, potem kliknij start.

Instrukcje

Instrukcja użytkowania oprogramowania

Wybierz źródło danych: Na stronie „Źródło danych” wybierz pliki tekstowe TXT, CSV, LOG itp. Możesz też wybrać folder, wkleić listę URL lub wczytać dane przykładowe, aby przetestować proces.
Ustaw sposób parsowania:
- Wyodrębnij wszystkie URL z tekstu: Odpowiednie dla mieszanych treści, takich jak logi, kod źródłowy stron WWW czy fragmenty JSON.
- Przetwarzaj po jednym URL w każdym wierszu: Odpowiednie dla już uporządkowanych list adresów.
Wybierz zawartość wyjściową: Możesz wybrać typy wyników, takie jak domena główna, pełna domena, protokół+domena, pełny URL, oryginalny fragment, sufiks domeny itp.
Skonfiguruj reguły filtrowania:
- Filtrowanie sufiksów: Możesz zachować tylko lub wykluczyć sufiksy domen, takie jak .com, .cn, .com.cn, .co.uk.
- Filtrowanie protokołu: Możesz nie ograniczać protokołu albo zachować tylko HTTP lub HTTPS.
- Filtrowanie słów kluczowych: Możesz filtrować według domen zawierających słowo kluczowe, wykluczać domeny lub wybierać ścieżki zawierające słowo kluczowe.
- Ustawienia usuwania duplikatów: Obsługiwane jest globalne usuwanie duplikatów, usuwanie duplikatów w obrębie pojedynczego pliku, a także zachowanie powtarzających się wyników.
Ustaw sposób wyjścia: Możesz generować wyniki osobno dla każdego pliku z zachowaniem oryginalnej nazwy, według typu wyniku do osobnych folderów albo scalić wszystko w jeden plik wynikowy.
Rozpocznij przetwarzanie i pobierz: Przejdź na stronę „Przetwarzanie i pobieranie”, kliknij „Rozpocznij przetwarzanie”, a po zakończeniu kliknij „Pobierz wyniki ZIP”, aby zapisać przetworzone pliki.

Często zadawane pytania

Odpowiedź: Domena główna to główna domena, np. example.com; pełna domena zachowuje subdomeny, takie jak www, blog, shop; domena z protokołem zachowuje http lub https, np. https://www.example.com.

Odpowiedź: Typowe przyczyny to niepełny format, niewystarczająca liczba poziomów domeny, nietypowe znaki, protokół inny niż HTTP/HTTPS albo odfiltrowanie przez reguły sufiksu, słów kluczowych lub protokołu. Możesz zaznaczyć „Generuj nierozpoznane fragmenty”, aby sprawdzić plik diagnostyczny.

Odpowiedź: Możesz bezpośrednio zaznaczyć popularne rozszerzenia albo wpisać w niestandardowych rozszerzeniach wartości takie jak .com, .net, .com.cn. Wiele rozszerzeń oddziel przecinkami, średnikami lub nowymi liniami.

Odpowiedź: Przy zapisie osobno dla każdego pliku zostanie zachowana oryginalna nazwa pliku. Jeśli kilka plików ma tę samą nazwę, system doda do nazwy numer, np. list.txt, list(2).txt, aby wyniki się nie nadpisywały.

Odpowiedź: Wybierz „globalne usuwanie duplikatów”, gdy chcesz jednolicie oczyścić dane z wielu plików; wybierz „usuwanie duplikatów w każdym pliku”, gdy każdy plik ma zachować własny wynik; wybierz „bez usuwania duplikatów”, gdy chcesz zachować częstotliwość wystąpień lub oryginalne powtórzone rekordy.

Odpowiedź: Nie. Zawartość plików jest odczytywana, filtrowana i pakowana na bieżącej stronie, bez przesyłania na serwer. To odpowiednie do przetwarzania danych zawierających linki wewnętrzne, fragmenty logów lub listy witryn.

Odpowiedź: Domyślnie zawiera wyniki przetwarzania wygenerowane zgodnie z oryginalnymi nazwami plików oraz raport statystyczny. Jeśli włączono „nierozpoznane fragmenty”, zostanie dodatkowo wygenerowany plik diagnostyczny rejestrujący fragmenty URL, których nie można przeanalizować, oraz przyczyny.