文本去重
行级去重、排序、去序号前缀、去空行，多行文本一键整理。
原文
0 字符1 行0 B
处理结果
转换结果会显示在这里
0 字符1 行0 B
使用说明
这个工具解决什么问题
从聊天记录、多个表格、网页里收集的关键词、名单、链接,合并后总是一堆重复行和混乱序号。手工 Ctrl+F 查重既慢又漏。这个工具按行去重:保留首次出现顺序、可选忽略大小写,顺带清掉序号前缀与空行,需要时再按字典或长度排个序,杂乱清单一次理顺。
核心能力
行级去重:保留首次出现,顺序不乱。忽略大小写:可选的同义合并。序号清理:数字序号、中文序号、列表符一键去除。排序:字典序与长度两种,升序降序。
使用建议
合并多人收集的资料先去序号、去空行,再去重;SEO 关键词清单用忽略大小写模式;清理完的清单配合站内「字数统计」看规模,或直接导出使用。
与排序的组合用法:先去序号前缀清理多种来源的编号差异,再忽略大小写去重合并同义词,最后按字典序排序——三步下来,多来源合并的清单立刻干净可用。
常见问题
去重后顺序会变吗?
默认不会。「保留首次出现顺序」模式下,重复行只保留第一次出现的那次,整体顺序与原文一致,适合处理「清单要去重但不能打乱」的场景。需要重新排序时再手动选字典序或长度排序。
「忽略大小写去重」是什么意思?
勾选后,Python、python、PYTHON 会被视为同一行,只保留首次出现的写法。适合清理关键词、标签、邮箱这类大小写不敏感的清单;代码标识符清单则不要勾,避免误删。
「去序号前缀」能处理哪些格式?
常见的列表序号都能清:1. 2. 3.、1) 2)、(一)(二)、一、 二、 以及 Markdown 的 - * 列表符。清理后每行只剩正文,方便重新编号或合并多个来源的清单。