Eliminar duplicados y fusionar archivos TXT

Procesa archivos TXT por lotes, elimina líneas duplicadas y permite combinar varios archivos en uno.

Modo de ejecución en navegador: Tus datos se procesan en tu navegador y no se suben al servidor.

Velocidad y estabilidad: La velocidad de procesamiento depende de tu dispositivo y navegador. Para lotes grandes, la versión de escritorio puede ser más estable.

Cargando herramienta, espera...

Si la herramienta en línea no carga o no se ejecuta, prueba la herramienta de escritorio. https://tools.yikeaigc.com/

Uso de herramientas

Volver a la versión anterior

Hay una versión de escritorio con funciones más potentes y estables. Abrir versión de escritorio

Confirma las reglas en “Ajustes” y luego pulsa iniciar. Admite pegar texto, seleccionar TXT por lotes, fusionar, quitar duplicados por archivo o tras fusionar; al elegir varios archivos solo se muestran los primeros 20, pero se procesan todos.

1Entrada de texto

El cuadro de texto es para contenido temporal; para procesar varios archivos, usa el área de archivos de la derecha y elige “Archivos seleccionados” en ajustes.

2Entrada de archivos

Haz clic para elegir archivos o arrastra TXT aquí Admite archivos de texto .txt, .log, .md, .csv, .json, etc.; no se suben al servidor.

Esta acción leerá el texto o los archivos del navegador y los procesará según las reglas configuradas. Revise primero la configuración de procesamiento.

Preparando... 0%

Archivos procesados

Líneas originales

Líneas de salida

Eliminar duplicados

4Detalles del proceso

Archivo/origen	Original	Salida	Eliminadas	Estado
Sin resultados

Tras procesar, se mostrarán los primeros 20 detalles; los archivos no mostrados también se procesarán.

5Vista previa

La vista previa solo muestra parte del contenido; el archivo descargado conserva el resultado completo.

Instrucciones

Instrucciones de uso del software

Seleccionar contenido de entrada: puede pegar contenido TXT en el cuadro de texto o seleccionar varios archivos TXT para procesarlos por lotes. La lista de archivos solo muestra los primeros 20; el resto también participará en el procesamiento.
Confirmar el alcance del procesamiento: en “Configuración de procesamiento”, elija procesar el contenido del cuadro de texto, los archivos seleccionados o la detección automática. Si hay archivos, la detección automática dará prioridad al procesamiento de los archivos.
Seleccionar modo de procesamiento:
- Eliminar duplicados por archivo: elimina de forma independiente las líneas duplicadas de cada archivo; el nombre de salida conserva el nombre original. Si hay nombres repetidos, se añadirá automáticamente un número para diferenciarlos.
- Eliminar duplicados tras combinar: primero combina varios archivos o el contenido de texto y luego elimina las líneas duplicadas del resultado combinado.
- Solo combinar: combina el contenido en orden, sin eliminar líneas duplicadas.
Configurar reglas de eliminación de duplicados: puede configurar conservar la primera aparición, conservar la última aparición o eliminar todo el grupo duplicado, y elegir reglas de comparación como mayúsculas/minúsculas, espacios en blanco, líneas vacías, puntuación y conversión de ancho completo a medio ancho.
Configurar parámetros de salida: puede elegir saltos de línea LF o CRLF, establecer el separador entre archivos combinados, el nombre del archivo de salida, si se añade UTF-8 BOM y si se añaden marcas de separación de archivos.
Iniciar el procesamiento y descargar: haga clic en “Iniciar procesamiento” para ver estadísticas, detalles y vista previa. El procesamiento por archivo generará un paquete ZIP, mientras que el modo combinado generará un archivo TXT.

Preguntas frecuentes

R: Eliminar duplicados por archivo procesa cada archivo TXT por separado, ideal para conservar resultados independientes por archivo; eliminar duplicados tras combinar reúne primero todo el contenido y luego elimina las líneas duplicadas de forma unificada, ideal para organizar listas, palabras clave, registros y otros datos repartidos entre archivos.

R: De forma predeterminada, se consideran duplicadas las líneas cuyo contenido completo coincide exactamente. También puede elegir en la configuración ignorar mayúsculas y minúsculas, ignorar espacios al inicio y al final, comprimir espacios consecutivos, ignorar puntuación común o convertir ancho completo a medio ancho, para comparar contenido similar con formatos diferentes según una misma regla.

R: Sí. La herramienta ofrece tres opciones para las líneas vacías: conservarlas, conservar solo una línea vacía o eliminarlas. También puede elegir si distinguir o ignorar mayúsculas y minúsculas. Antes de procesar, confirme las reglas según el uso previsto de los datos.

Respuesta: Al procesar archivo por archivo, se intenta conservar el nombre original. Si hay archivos con el mismo nombre, el sistema añadirá un número al final, por ejemplo data.txt, data2.txt, data3.txt, para evitar que los archivos dentro del paquete comprimido se sobrescriban entre sí.

Respuesta: El tiempo de procesamiento depende de la memoria del dispositivo, la CPU y la cantidad total de texto. Si los archivos son grandes, puedes procesarlos por lotes; si el contenido alcanza el nivel de GB, se recomienda reducir la cantidad de archivos por procesamiento y cerrar los programas que consuman muchos recursos.

Respuesta: Puedes seleccionar manualmente UTF-8, GBK, GB18030, Big5 o UTF-16 LE en “Codificación de archivo”. Las codificaciones habituales de TXT en chino son UTF-8 o GBK; basta con cambiarla y volver a procesar.