在线文本去重工具用于清理按行或按分隔符组织的重复内容：把名单、关键词、订单号、日志等文本粘贴进来，工具会实时输出去重结果，并同时给出输入条数、唯一条数、去除数量与重复率。
支持忽略大小写、去除首尾空格、移除空行、保留最后一次出现等比较规则，也能切换为「仅列出重复项」「仅列出只出现一次的条目」「去重并标注次数」等审计视图。全部计算在浏览器本地完成，内容不会上传服务器。
多半是不可见字符或首尾空格造成的差异。开启「去除首尾空格」；如果仍不去重，可能含有全角空格或零宽字符，可先清理不可见字符后再试。
默认不会。工具保留每条第一次出现的位置；只有你主动切换「字母 A→Z / 按出现次数」排序时才会重排。
输出所有出现过 2 次及以上的条目（每条一份），便于定位重复来源；「去重并标注次数」则会附带 ×N 的计数。
基于 Set 的哈希去重，50 万行实测约数秒完成；超过 30 万字符时页面会提示可能略有延迟，结果仍会在停止输入后自动完成。
不会。全部逻辑在浏览器本地执行，断网也能使用；下载与复制都在本机完成。
这个工具完全在你的浏览器里运行：你输入的内容、上传的文件，都不会离开你的电脑，也不会传到任何服务器。
放心用，数据只在你自己的电脑上转一圈。
用手机相机扫描二维码，即可继续使用该工具
遇到问题或有好建议？告诉我们。