2026年11月9日

你的证据矩阵只有摘要,没有可比较字段:修复指南

在手稿返回给合著者前一周,你打开了矩阵。每一行都有一段笔记。有些是两句话,有些是一页。一条写着“方法强,样本小”。另一条写着“相关但过时”。第三条是没有标签的块引用。当合著者问哪些研究实际测量了你关心的结局时,你无法从矩阵中回答。你只能重读论文。 这就是本指南要解决的失败。矩阵不是空的;它是*非结构化的*。摘要记录了读者认为有趣的内容,但它们没有为每项研究记录相同的属性,因此无法比较、计数或审计。修复不是写更多。而是预先决定每一行必须携

作者WisPaper 团队AI 科研工作流团队
你的证据矩阵只有摘要,没有可比较字段:修复指南的研究工作流插图

在手稿返回给合著者前一周,你打开了矩阵。每一行都有一段笔记。有些是两句话,有些是一页。一条写着“方法强,样本小”。另一条写着“相关但过时”。第三条是没有标签的块引用。当合著者问哪些研究实际测量了你关心的结局时,你无法从矩阵中回答。你只能重读论文。

这就是本指南要解决的失败。矩阵不是空的;它是非结构化的。摘要记录了读者认为有趣的内容,但它们没有为每项研究记录相同的属性,因此无法比较、计数或审计。修复不是写更多。而是预先决定每一行必须携带哪些字段,然后根据这些字段重建行,并保留显示每个值如何得出的轨迹。

本文逐步介绍诊断、修复结构的决策、你需要的工件,以及重建后的矩阵是否准备好支持手稿、交接或评审的测试。

为什么只有摘要的矩阵在比较阶段会失败?

摘要是为写它的人写的。可比较字段是为项目试图回答的问题写的。差异在其他人需要矩阵的那一刻就显现出来。

只有摘要的矩阵以三种可预测的方式失败:

  • 粒度不均。 一行记录样本量和设计;下一行只记录一个主题。你无法判断空白意味着“未报告”还是“未检查”。
  • 嵌入的判断。 像“强”或“过时”这样的短语隐藏了背后的标准。合著者无法同意或不同意没有明确依据的判断。
  • 没有链接回来源。 没有说明论文中主张来自哪里的摘要,以后在同行评审或实验室交接时无法验证。

这些都不是写作问题。它们是设计问题。修复方法是先定义列再填充它们,并将每个单元格视为需要在来源中有位置的声明。

重建前诊断你的起始状态

在添加字段之前,描述你实际拥有的内容。简短的诊断可以节省你重建本来没问题的行,并防止你信任有问题的行。

检查你的行是研究还是报告

Cochrane关于检索和选择研究的指南指出,一项研究可以有多个报告。如果你的矩阵每个PDF一行,两行可能描述同一项研究,你的计数就会出错。决定一行的单位是研究还是报告,并记录该决定。如果是研究,你需要一个字段将多个报告链接到一条记录。

检查空白是否有意义

对每一列排序并查看空单元格。对于每个空白,问:我们是检查了没发现,还是从未查看?这些是不同的状态,应该是不同的值。无法区分它们的矩阵会误导下一个读者。

检查你的纳入逻辑是否写下来

Cochrane建议根据资格标准规划检索。如果你的资格标准只存在于合著者的头脑中,你的行就无法对照它们检查。先写下标准;字段随之而来。

从你的资格标准决定可比较字段

字段不应该是通用模板。它们应该是你的问题要求你比较的属性。从资格标准和计划进行的综合中推导它们。

一个可行的集合通常包括:

  • 身份: 研究标签、链接的报告以及每个提取值的来源位置。
  • 资格: 逐条标准的决定,记录排除原因而不是删除。
  • 设计和人群: 你的比较所依赖的属性,每个都有定义的值集。
  • 结局数据: 测量指标、时间点以及它在报告中出现的位置。
  • 确定性备注: 报告本身标记为局限性的内容,与位置关联。

两条规则保持字段可比较。第一,每个字段都有定义的值集或规定的格式,这样两个编码者产生相同类型的条目。第二,每个提取值都带有指向来源位置的指针。没有位置的值是伪装的摘要。

在提取时构建方法轨迹,而不是事后

PRISMA 2020提供了检索、选择和综合方法的报告模板,包括流程图模板。这些模板有用正是因为它们强制方法可见。在你的矩阵中构建同样的可见性。

保持一个运行日志,包含带日期的条目:

  • 检索策略和使用的来源;
  • 去重步骤;
  • 每个阶段的筛选决定;
  • 字段定义的变更,以及变更原因;
  • 最后一次检索重跑的日期。

Cochrane建议记录检索过程、去重记录、分阶段筛选,并在发表前重跑检索。记录这些步骤的日志将你的矩阵从私人工作文件转变为可审计的工件。当合著者问为什么排除一项研究时,答案是带日期的条目,而不是回忆。

文献检索在修复中处于什么位置?

如果你的诊断显示矩阵缺少合格研究,或者检索从未记录,修复包括检索步骤。从资格标准而不是你碰巧记得的关键词来规划它。

Cochrane的指南倾向于将自由文本词与主题词结合,并使用多个来源。这种组合使检索可被他人重现。当你需要运行或扩展该检索时,WisPaper 检索 提供了用于查找学术论文的学术搜索界面,WisPaper Scholar 检索 为同一任务提供了公共入口。将你使用的策略记录在方法日志中,以便检索可以重复。

将检索结果转化为有组织、可回答问题的文库

检索结果还不是矩阵。中间步骤是一组稳定的论文,你可以随着字段的演变查询和重新查询。

将你正在筛选的论文保存或上传到My 文献库,以便候选集在一个地方组织。论文进入文库后,文献库 QA 允许你基于上传到My 文献库或从检索结果添加的论文提问。这在提取期间很有用:不必重读完整报告来确认一个字段,你可以提出有针对性的问题,然后对照你在矩阵中记录的来源位置验证答案。

保持验证步骤明确。矩阵单元格仍应指向报告中值的来源,以便合著者或评审者可以检查。

在矩阵喂给手稿之前处理引用完整性

可比较的矩阵取决于其背后的参考文献。如果一行的引用错误,附加到它的字段值就附加到了错误的研究上。

在矩阵喂给参考文献之前,筛选BibTeX。TrueCite 对照真实学术数据库检查BibTeX,以标记幻觉引用。对矩阵将生成的参考文献列表运行它,并在手稿传阅前解决标记的条目。将筛选日期与检索重跑日期一起记录在方法日志中。

在合著者和评审者之间协调重建

存在于一个人文件中的重建会漂移。将项目放在合作者可以看到当前状态的地方。

Research Projects 是WisPaper用于创建和运行项目的区域。用它来保存重建的工作上下文,使字段定义、候选集和提取工作放在一起,而不是分散在文件夹中。对于适合文献综述或复现用例的较长任务,Scholar Agent 是对应的WisPaper区域。

就一小套协调规则达成一致:

  • 字段定义有一个负责人;变更记录日期和原因。
  • 在完整提取之前,由两名编码者对样本行逐字段比较。
  • 当前矩阵存放在一个地方,旧版本归档而不是覆盖。
  • 为引用筛选和检索重跑指定一名评审者。

这些规则使矩阵在合著者变更或实验室交接后仍能存活。

修正后的交付物是什么样子?

修复后的矩阵不是更长的文档。它是结构化的。从未见过该项目的人应该能够打开它,不打开任何PDF就能回答四个问题:

  1. 哪些研究被纳入,每项研究属于哪些报告?
  2. 对于每项纳入研究,每个可比较字段的值是什么,每个值来自来源中的哪里?
  3. 每条排除记录为什么被排除?
  4. 检索最后一次运行是什么时候,自上次运行以来有什么变化?

除了矩阵,交付物还包括方法日志、资格标准、带有值集的字段定义以及引用筛选记录。这些共同构成证据轨迹,手稿方法部分、同行评审回复或实验室交接可以直接利用。

你如何知道矩阵已准备好?

在矩阵离开你手之前运行准备检查。以下每一项都是是或否的测试,而不是主观判断。

  • 字段完整性。 每个纳入行对每个字段都有值或明确的“未报告”或“未检查”。
  • 位置覆盖。 每个提取值都有来源位置。
  • 研究报告链接。 一项研究的多个报告链接到一条记录。
  • 排除原因。 每条排除记录都有与标准关联的记录原因。
  • 方法日志时效性。 日志记录检索策略、去重、筛选阶段、字段变更以及最后一次重跑的日期。
  • 引用筛选。 BibTeX已筛选,标记的条目已解决。
  • 独立检查。 第二名编码者已逐字段比较样本行,差异已解决或记录。

如果任何一项失败,矩阵未准备好。失败告诉你回到哪一步。

下一个项目的可迁移经验

三种实践适用于任何证据矩阵,无论下一个项目是手稿修订、新综述还是实验室交接。

在提取前定义字段。 预先决定可比较字段的成本与以后重建行相比很小。从资格标准和计划进行的综合中推导它们。

将每个单元格视为带有位置的声明。 没有指向来源的值是摘要。指针使矩阵可审计,并让合著者无需重读论文就能检查你的工作。

边做边记录方法。 检索策略、去重、筛选阶段、字段变更和重跑日期在当时记录成本低,事后重建成本高。NIH指南将透明方法、验证和可重复性视为严谨研究实践的核心部分;方法日志是工作矩阵中的具体形式。

当你开始下一个项目时,第一个工件是字段定义表,而不是第一个摘要。随后的矩阵将从第一行开始就可比较。

常见问题

不一定。先诊断:检查行是研究还是报告,空白意味着“未报告”还是“未检查”,以及资格标准是否写下来。然后定义可比较字段并根据它们重建行,将现有摘要保留为背景笔记而不是主要记录。已经包含所需值的行可以在每个值给出源位置后保留。