删除重复行

关于重复行删除器

本工具从列表中剔除重复的行，只保留每行的第一次出现。它是给邮件或地址列表去重、清理行出现两次的合并导出、整理关键词或标签列表，或把日志缩减为其唯一行的快捷方式。选项让你即使两行仅在大小写或首尾空格上不同，也可将其视为重复。

工作原理

它把你的文本拆分为行并按顺序遍历，记住已见过的行。某行首次出现时被保留；之后任何相同的行会被丢弃，实时计数会告诉你删除了多少重复项。什么算"相同"取决于这些开关：

• 修剪空格 — 比较时忽略首尾空格（并在输出中修剪）。
• 忽略大小写 — Apple 和 apple 被视为同一行。
• 删除空行 — 空行会被完全丢弃而非保留。

假设与行为

• 第一次出现者胜出，其余行的原始顺序保持不变——它不排序。
• 仅在你启用时，比较才应用修剪和大小写折叠；默认情况下，行必须完全匹配（含空格和大小写）才算重复。
• 开启修剪后，保留的行会以修剪后的形式输出，而不仅是修剪后比较。

局限

• 它只删除整行重复——无法找出一行内部重复的单词，或仅相差一个字符或标点的近似重复。
• "忽略大小写"使用简单的转小写，对英语可靠，但可能不像区域感知比较那样折叠每个带重音或非拉丁字符。
• 它保留每组重复的第一行；没有改为保留最后一行的选项。
• 非常大的列表在你浏览器的内存中处理，因此极大的文件取决于可用内存。

隐私

去重完全在你的浏览器中运行。你的列表绝不会被上传或存储。