行去重与排序

两份报名表拼在一起、日志里重复 IP。只比整行。手机号同一行多一空格，先清空白。不是 CRM「疑似同一人」。

志愿者名单导出了两次、日志要唯一 IP——整行精确去重。不是 CRM 合并，也不是「疑似同一人」。报名邮箱多一个空格，就会留两行。

空格差异先走空白清理。改一处用查找替换。两版对比用 Diff。大小写走大小写转换。

报名邮箱重复

• 一行一条。全角半角同一邮箱可能留两行。先清空白再去重。
• 不是姓名模糊去重，也不是数仓。
• 不是各语言的完整排序规则。中文姓名排序不要当户口本顺序。
• 不是 2 GB 作业。超大粘贴受内存限制。

怎么用

1. 一行一项粘贴。CSV 先想清楚要比整行还是某一列。
2. 去重，需要时排序。
3. 抽查首尾行。客户名单用完清掉。

使用前先看清的限制

不是各语言的完整排序规则。不是 2 GB 作业。不是模糊匹配。