重复取决于当前统计对象
整理神圣计划资料时，两行内容相似可能是同一事件的副本，也可能是不同时间发生的相似事件。去重之前先确定研究对象：统计事件总数，还是统计各来源提供了多少条资料。如果目标不同，同样两行的处理方法也会不同。
稳定的事件标识通常比标题更有帮助，但标识也需要了解作用范围。某些编号只在单个来源内部唯一，合并来源后可能冲突。可以将来源与来源内编号组合保存，再记录它们是否指向同一现实事件，不凭编号相同就自动合并。
用八行示例分清三种数量
假设原始表有八行，其中一行与另一行完全相同，去掉这个精确副本后剩七行。七行中又有两行属于同一事件的前后修订版本，因此实际对应六个事件。八个原始行、七份不同版本记录和六个事件，分别回答不同问题。
如果只需要最新状态，可以选取每个事件的已确认最新版本，形成六行分析表；但旧版本仍保存在原始区。若研究修订过程，七份记录都可能有价值。不要用“去重后六条”一句话抹去中间处理过程。
先找候选，再确认关系
可以先按编号、日期、来源和关键字段筛选疑似重复项，再人工核对边界情况。相同标题但时间不同，可能是不同事件；相同时间但类别不同，可能是同一事件的更正，也可能是两个对象。合并决定应有具体依据。
时间接近不能单独作为删除理由。若设置容差，例如相差数秒视为候选，应说明这是筛选条件，而非最终去重证明。日期格式和时区先统一，原始时间保留。否则两份实际相同的记录可能因显示时间不同而漏过检查。
去重日志要保留保留与移除两端
每次处理可记录原始行标识、保留行标识、判断依据、执行日期和操作类型。精确副本与版本替代使用不同标记。被移出的行放在排除表，而不是永久删除，这样发现误判时可以恢复，也可以重新检查规则是否一致。
去重规则改变时，应从原始表重新生成分析表，不在上一版结果上反复删除。连续加工的表可能已经丢掉必要字段，无法支持新判断。原始区、处理规则和输出区分开保存，能让后续重算有稳定基础。
完成后核对总量与典型样本
检查原始行数是否等于保留行数加移出行数，确保每个移出项都能指向原因。再抽查同名不同日、同号不同来源、完全副本与修订记录等典型情况。这些样本有助于发现规则误伤，而不只是确认程序没有报错。
最终统计同时给出原始数量、精确重复数量、版本合并数量与分析事件数量。若部分关系仍无法确认，可保留独立行并标为待核对。谨慎保留不确定信息，比为了得到整齐总数而提前删除更利于后续复查。