文本去重工具在线使用

在线按行删除重复文本

把一行一条的文本粘贴到原始文本框，工具会实时识别相同内容并只保留一条。适合清理邮箱列表、手机号、用户 ID、订单号、域名、IP、关键词、名单、日志行和从 Excel 或数据库复制出的单列数据。

区分大小写与忽略首尾空格

区分大小写开启时，Apple 与 apple 会被视为不同内容；关闭后可合并大小写不同的文本。忽略首尾空格只改变重复判断规则，不会改写最终保留行的原始内容，适合处理复制粘贴带来的隐藏空格。

保留首次或末次出现

默认保留每组重复数据首次出现的行并维持原顺序，也可以改为保留末次出现。需要让更新较晚的记录覆盖较早记录时，可选择保留末次；需要保持最初录入顺序时则选择保留首次。

重复统计、行号定位与自然排序

结果区会显示原始行数、结果行数、移除数量和重复内容组数，并列出每组重复值的出现次数及原始行号。自然排序会把 item2 放在 item10 前，适合包含编号的文本列表。

本地处理、复制与下载

文本比较、去重和排序都在当前浏览器内完成，不会把输入内容上传到服务器。处理结果可以一键复制、下载为 TXT 文件，也可以替换原文后继续调整比较规则。

常见问题

• 如何忽略大小写进行文本去重？

  关闭“区分大小写”即可。此时 API、api 和 Api 会归为同一组，并根据“保留首次”或“保留末次”输出其中一行的原始写法。

• 去重时会自动删除每行首尾空格吗？

  不会。“忽略首尾空格”只用于判断两行是否相同，最终输出仍保留首次或末次选中行的原始内容和空格。

• 如何保留最后一次出现的内容？

  在“保留规则”中选择“保留末次”。保持原顺序时，结果会按照被保留的末次出现位置排列。

• 空行可以保留吗？

  可以。关闭“删除空行”后，空行会参与去重，多处空行最终只保留一行；开启时则删除所有空行和只包含空格的行。

• 输入文本会上传到服务器吗？

  不会。文本去重、比较、统计、排序、复制前的数据生成均在浏览器本地完成。下载功能也只会在本地生成 TXT 文件。