文本去重清理
一行一条的文本粘贴进来,把重复的、空白的、首尾带空格的收拾干净,结果还可以再排序、限量、加前后缀,导出 txt 直接复用。处理全在浏览器里完成,内容不发出去。
粘贴要清理的文本
一行一条;下面怎么改空行与重复由此决定
行与行之间用换行分隔;超过 20 万行会拦住并提示拆段,避免浏览器一次处理卡死。
怎么处理
改完自动重跑(300ms 防抖)
空白处理
保留空行时会自动关掉裁剪,否则空格行裁完就成了空行,等于没保留。
重复
批量加前后缀(可选)
0输入行数
0输出行数
0删空行
0去重复
0裁剪行
输出保留原始行文本,行内空格不受影响
处理口径
规则都在浏览器本地函数里,改口径不会碰数据库
空行 = 只有空白字符(含全角空格)的行;连续空行被压成一条时不裁剪它们。
去重保留第一次出现的位置;忽略大小写时按英文小写比较。排序用 localeCompare 字典序,中文按拼音序;按长度排序同样稳定。裁剪只动首尾,行内空格不碰。