表格数据查重:如何复核跨文件、跨 Sheet 的数值复用线索
表格数据查重不能只比较单元格是否相同,还要核对跨文件、跨 Sheet 的位置、顺序、差值、比例和实验语境,形成可追溯的数值复用复核记录。
科研场景下的表格数据查重,关注的不是简单地寻找两个完全相同的文件,而是筛查不同数据区域之间是否存在需要解释的数值关系。同一组数据可能经过排序、改写、错位、缩放或重新排版后出现在另一张表中,文件名和单元格坐标也可能已经发生变化。
复核跨文件、跨 Sheet 关系时,第一步是明确比较范围:哪些文件属于同一稿件,哪些 Sheet 是原始测量,哪些 Sheet 是汇总或派生结果,哪些列代表同一实验条件。范围越清楚,后续证据越容易与实验批次、组别和观测单位对应起来。
DataScan 可以同时载入多份 Excel、CSV 或 TSV 文件,并按单 Sheet 或多 Sheet 合并方式开展本地核验。产品检测项覆盖行列片段和稀疏复用、高精度同值连续重复、矩形块复用、排序或重排复用、对位完全重复、固定差值、固定比例、线性派生,以及 replicate 小样本关系等常见数值模式。
结果首先在证据画布中按关系归并。每条证据会保留相关区域、数值对应关系和原始坐标,便于判断它是局部片段复用、跨区域重排,还是由固定差值或比例形成的机械关系。对同一关系涉及的多组位置,集中查看比单独记录零散单元格更容易发现整体结构。
接下来可以使用原表定位和智能对照进行逐项复核。原表定位用于确认命中单元格的上下文,智能对照用于并列查看两侧或上下区域。复核时应同步检查列标题、组别、单位、共享对照、公式来源、实验批次和数据版本,不能把数值相似直接等同于不当复用。
对于能够由实验设计或数据处理流程解释的关系,应在内部记录中保存解释依据;对于暂时无法解释的关系,则保留证据范围、对应坐标和待核问题。这样的表格数据查重记录既能帮助课题组修正或补充原始资料,也能为后续正式沟通提供清晰的事实基础。
DataScan 输出的是自动化筛查得到的风险线索和复核依据,不对论文、作者或机构作学术不端定性。最终判断需要结合完整原始数据、实验记录、研究设计和作者说明,并由具备相应背景的人员完成。