行去重工具
从文本中删除重复行。
从多行文本中删除重复行,同时保持保留下来的行顺序。可以选择是否区分大小写、保留最后一次出现的重复项,以及是否在比较前去除行首和行尾空格。所有处理都在浏览器本地完成。
如何删除重复行
- 把列表、日志、数据或其他多行文本粘贴到输入区域。
- 选择是否区分大小写、是否保留最后一次出现,以及是否修剪每一行。
- 执行去重,或编辑输入内容并查看结果自动更新。
- 检查删除的行数,然后复制整理后的输出。
重复行如何判断
默认不区分大小写,因此“Example”和“example”会被视为同一行。如果大小写差异本身有意义,请开启区分大小写。修剪选项会在比较前删除每行首尾的空格,并在结果中使用修剪后的内容。
“保留最后一个”适合重复值代表后续更新的场景。此工具适用于关键词、ID、URL、从电子表格复制的值、日志片段等按行整理的文本,重点是删除完全相同或经过所选规则规范化后相同的行。
隐私与限制
输入文本只在浏览器本地处理,不会上传到 Votilo。工具按整行内容判断重复,不会识别近似文本、拼写差异、语义相似内容,也不会分析跨多个字段的结构化记录是否重复。
常见问题
会保留原来的行顺序吗?
会。保留下来的内容保持对应的出现顺序;启用“保留最后一个”后,每组重复项保留最后一次出现。
默认区分大小写吗?
默认不区分。如果需要把大小写不同的内容视为不同的行,请开启相应选项。
修剪行有什么作用?
它会在比较前删除每行首尾空格,并把修剪后的内容用于输出。
能找到相似但不完全相同的行吗?
不能。此工具按规范化后的行是否相同来去重,不进行模糊匹配或语义相似度分析。
粘贴的文本会被上传吗?
不会。去重处理在浏览器本地完成。