稳定地提取方法,意味着把一摞论文变成一份可比较的记录:相同的字段、相同的定义、相同的决策规则应用于每一项研究。可靠的实现方式是把方法提取当作一个小型、有文档记录的流程,而不是一种阅读习惯。你在阅读之前先定义什么算作方法,建立一个固定模板,在几篇论文上试运行,然后逐篇应用,并记录你的判断决定。
本指南面向正在完成课程论文、学位论文章节或第一篇手稿并为下一个项目做准备的学生和早期职业研究者。它依次讲解起始状态、你需要的决策和产物、带检查点的完整流程、一个完整示例、一份可复用清单,以及明确的完成标准。
为什么方法提取会漂移,以及一致性实际需要什么
方法提取漂移有可预测的原因。论文报告方法的详细程度不同,对相似程序使用不同名称,并把关键步骤埋在补充材料或引用的先前工作中。当你没有固定框架地阅读时,你在每篇论文中注意到的东西不同,你的笔记就变成一组摘要,而不是可比较的数据集。
因此,一致性不在于更仔细地阅读。它需要三件事协同工作:
- 明确的范围。 你事先决定哪些研究符合条件,以及你将记录哪些方法细节。
- 固定的模板。 每篇论文都按相同字段、相同顺序阅读。
- 决策日志。 当论文存在歧义时,你记录所应用的规则,以便下一篇论文以相同方式处理。
检索与筛选文献强化了这一纪律。Cochrane Handbook 建议根据纳入标准规划检索,使用多个来源,将自由文本词与主题词结合,记录过程,去重记录,分阶段筛选,并关联同一研究的多份报告。这些习惯直接适用于方法提取:纳入标准定义你从什么中提取,分阶段筛选保持你的集合干净,关联多份报告防止你把一项研究当作多项。
在构建任何东西之前诊断你的起始状态
大多数人带着几种可识别的起始状态之一来到这个任务。说出你的状态,就能告诉你先修复哪一步。
PDF 堆。 你收集了论文但没有纳入规则,所以集合不断增长和缩小。修复:在进一步阅读之前写下纳入标准。
不一致的笔记。 你有摘要,但每份摘要强调不同细节。修复:构建模板并重新提取一个小型试点集。
导师的评论。 反馈说你的方法比较不均衡,或者你描述研究但没有比较它们。修复:定义你的比较需要的字段,然后带着这些字段重新阅读。
新项目。 你正在开始一个新项目,也许在一月,并希望在设计的任何东西之前获得方法基线。修复:在一个刻意限定的集合上运行下面的完整流程。
寒假清理或一月项目启动是正确做这件事的好时机,因为你可以投资于一个可复用的模板,它也服务于下一篇手稿。
在阅读之前决定什么算作方法
这是决定下游一切的决定。用平实的语言写下你将记录什么和不记录什么。
问自己:
- 哪些研究符合条件? 定义对你的问题重要的人群、干预或暴露、比较和结局,并把它们写成明确的纳入标准。
- 什么算作方法细节? 决定你是否记录研究设计、样本和抽样、材料和工具、程序、分析方法以及报告的限制。选择你自己的比较实际需要的字段。
- 你会深入多深? 决定你是遵循引用的先前工作方法,还是只记录论文本身报告的内容。说明规则。
- 缺失细节你会怎么做? 决定你是标记为未报告、遵循引用,还是排除该研究。说明规则。
把这些决定写进一份简短方案文档。它不需要很长,但必须在开始提取之前存在,以便后面的论文按照与前面论文相同的标准评判。
构建固定的提取模板
模板是使提取可比较的东西。保持它足够窄,以便每篇论文都能完成;足够具体,以支持你的比较。
一个可行的模板为每项研究记录:
- 引用和标识符 — 作者、年份、标题,以及你分配的稳定 ID。
- 纳入检查 — 研究是否符合你的标准,以及为什么。
- 研究设计 — 作者描述的设计。
- 样本 — 研究了谁或什么,以及他们如何被选择。
- 材料和工具 — 用于收集数据的东西。
- 程序 — 作者报告的步骤,按顺序。
- 分析方法 — 作者说他们如何分析数据。
- 报告的限制 — 作者自己指出的内容。
- 提取笔记 — 歧义、判断决定,以及每个细节来自论文的何处。
保持字段在各论文间完全相同。如果你发现自己在中途添加字段,把它添加到模板并回去为较早论文填写,而不是只应用于新论文。
在小集合上试运行并检查你自己的一致性
试点是一致性赢得或失去的地方。取三到五篇明确符合你标准的论文,使用模板提取它们。然后比较你的提取结果。
寻找:
- 对相似细节填写不同的字段。
- 因为论文不清楚而不是因为细节缺失而留空的字段。
- 你做出但没有记录的判断决定。
修订模板和方案以解决每个差异,然后重新提取试点集。当对同一批论文的两次处理产生相同记录时,你的模板就准备好扩展了。
这也是引入支持阅读任务的工具的时候。如果你正在处理一组已保存的论文,你可以在我的图书馆中组织它们,以便试点集和完整集保持分离且可识别。如果你想基于这些已保存论文提问,图书馆问答让你查询上传到我的图书馆或从搜索结果添加的论文,这对于检查你期望的细节是否实际报告很有用。
找到并筛选你将从中提取的论文
一致的提取依赖于干净、有界的集合。刻意构建那个集合。
从你的标准检索。 把你的纳入标准转化为检索词。在数据库支持的地方,将自由文本词与主题词结合,并使用多个来源而不是依赖一个。例如,PubMed 支持字段标签、短语检索、过滤器、高级检索、保存的检索和相似文章,其检索详情揭示词如何被翻译和组合。Google Scholar 记录了按作者和标题检索、日期排序和限制、被引用和相关文章、引用导出以及提醒。使用这些功能使你的检索可复现,而不是临时的。
记录检索。 记录来源、词、日期和过滤器。Cochrane 关于记录过程和去重记录的指导直接适用于此。
分阶段筛选。 先筛选标题和摘要,然后全文,在每个阶段应用你的纳入标准。关联同一研究的多份报告,以免一项研究两次进入你的集合。
在最终确定之前重新运行。 Cochrane 建议在发表前重新运行检索。如果你的提取用于手稿,最终检索轮次会捕获你工作期间发表的研究。
要通过 WisPaper 的学术检索界面查找论文,请从 WisPaper 检索开始。如果你更喜欢一个解释检索能力的公共入口,请使用 WisPaper Scholar 检索。
逐篇提取并记录决策日志
有了干净的集合和经过测试的模板,提取就变成可重复的例行工作。按固定顺序一次处理一篇论文,在继续之前完成每个字段。
对于每篇论文:
- 确认纳入 对照你写下的标准并记录决定。
- 为方法而读,不是为结果而读。 定位设计、样本、材料、程序和分析部分,以及任何补充材料。
- 填写每个模板字段,在论文沉默的地方标记“未报告”,而不是猜测。
- 记录每个细节的位置,以便以后验证。
- 在提取笔记中记录判断决定,以及你应用的规则。
- 更新方案 如果出现新情况,然后重新审视较早论文以应用新规则。
当论文很长或方法上很密集时,更长的研究任务可以帮助你系统地处理文献。WisPaper 的 Scholar Agent 区域为更长的研究任务设计,具有文献综述、灵感或复现用例。用它支持阅读工作,然后在你自己的模板中记录提取的细节,以便记录在所有论文间保持可比较。
完整示例:一月项目启动
假设你在一月开始一个新项目,需要在设计自己的研究之前从文献中获得方法基线。
第 1 步 — 范围。 你写下纳入标准:解决你的研究问题的研究,在定义的窗口内发表,报告实证方法。你决定记录设计、样本、材料、程序、分析和报告的限制,并标记未报告的细节而不是推断它们。
第 2 步 — 检索。 你把标准转化为词,检索多个来源,并保存检索详情。你记录来源、词、日期和过滤器,并去重记录。
第 3 步 — 筛选。 你筛选标题和摘要,然后全文,在每个阶段应用标准。你关联同一研究的多份报告,以便每项研究只出现一次。
第 4 步 — 试点。 你提取三篇明确符合条件的论文,比较记录,发现你记录“样本”不一致:有时是参与者数量,有时是招募环境。你把字段修订为两个子字段,重新提取试点,并确认记录现在匹配。
第 5 步 — 提取。 你按固定顺序处理完整集合,填写每个字段并记录判断决定。当一篇论文引用先前工作作为其程序时,你应用预先写好的规则,并把程序标记为通过引用报告。
第 6 步 — 组织。 你把项目的论文和笔记一起保存在研究项目中,以便提取记录与项目其余部分放在一起,而不是散落在文件中。
第 7 步 — 验证引用。 在写作之前,你检查提取记录中的每个参考文献都是真实的。TrueCite 对照真实学术数据库筛选 BibTeX 引用以标记幻觉参考文献,这是对你的模板所依赖的参考文献的有用最终检查。
第 8 步 — 重新运行并最终确定。 你在最终确定之前重新运行检索,添加任何新符合条件的研究,用相同模板提取它们,并关闭集合。
可复用清单
为每个提取项目使用此清单。它把上面的流程压缩成你可以复用的形式。
| 阶段 | 检查点 | 产物 |
|---|---|---|
| 范围 | 纳入标准已写下并注明日期 | 方案文档 |
| 模板 | 字段已固定并定义 | 提取模板 |
| 检索 | 来源、词、日期、过滤器已记录 | 检索日志 |
| 筛选 | 分阶段筛选完成;重复报告已关联 | 带决定的筛选集 |
| 试点 | 两次处理在试点集上一致 | 修订的模板和方案 |
| 提取 | 每个字段已填写;判断决定已记录 | 完成的提取记录 |
| 验证 | 引用已对照数据库检查 | 已验证的参考文献 |
| 最终确定 | 检索已重新运行;新研究已提取 | 关闭的最终集合 |
把方案、模板、检索日志和提取记录放在一起。它们是你的提取一致的证据,并使下一个项目更快。
如何知道你的提取已准备好
一致性是一种你可以检查的属性,而不是一种感觉。当以下所有条件都成立时,你的提取就准备好了:
- 方案早于提取。 你的纳入标准和字段定义在提取之前写下,任何后来的更改都注明日期并应用于较早论文。
- 每篇论文都按相同模板阅读。 没有论文缺少其他论文有的字段,也没有字段只为后来的论文添加。
- 试点与自身一致。 对试点集的两次处理在修订后产生相同记录。
- 判断决定已记录。 每个歧义都有记录的规则,并且规则被一致应用。
- 缺失细节被标记,而不是猜测。 论文未报告的字段按你陈述的规则标记为未报告。
- 集合干净且关闭。 重复报告已关联,检索已记录,最终重新运行已完成。
- 引用已验证。 你的提取所依赖的参考文献已检查。
如果任何一项失败,返回相关阶段,而不是修补个别记录。一致性来自流程,而不是一次纠正一个输出。
你的下一步行动
选择这个工作流的最小版本,本周运行它。在一页纸上写下你的纳入标准和模板,选择三篇明确符合标准的论文,提取它们两次,并比较。修订模板直到两次处理一致。那个试点是你集合其余部分的基础,也是当导师问你方法比较如何构建时你可以展示的产物。
如果你从零开始并想要这里描述的工具的一般入口,请从 WisPaper 主页或 WisPaper 英文主页开始。




