文本去重排序

文本按行去重与排序,可忽略大小写与首尾空白,排序支持中文拼音、自然顺序与长度。

按行处理,结果实时更新
处理结果

中文排序用浏览器内置的拼音比较,不依赖外部库;判重可选忽略大小写与首尾空白。

本工具在你的浏览器内运行,输入的内容与文件不会上传到任何服务器。

常见问题

Apple 和 apple 算不算重复?
取决于「判重方式」。选「精确匹配」时算两条(只有一模一样才算重复);选「忽略大小写」或「忽略大小写 + 首尾空白」时就只保留一条。保留哪一条由「重复行保留」决定:选首次出现的写法会留下先出现的那条(含它原本的大小写与空格),选最后一次则用最后出现的文本覆盖。
中文排序是按拼音吗?
选「中文拼音」时是的。「默认(字符编码顺序)」按 Unicode 码点排,中文的结果与读音、笔画都无关,看起来很乱;「中文拼音」用浏览器内置的比较器按读音顺序排。注意多音字按常见读音处理,不保证与某个特定词典完全一致。
「自然顺序」和「默认」差在哪?
差别在数字。默认的字符编码顺序是逐字符比较,于是「第 10 名」会排在「第 2 名」前面(因为字符 1 小于字符 2);「自然顺序」会把连续数字当成数值来比,得到「第 2 名、第 10 名」。整理带编号的清单、版本号、章节名时用它更合适。

相关工具