稿件中的可信度问题很少源于一篇糟糕的论文,而在于不匹配:强主张依赖薄弱或间接的来源,或严谨的来源被拉伸到超出其支持范围。实用的解决方法是停止抽象地问“这个来源可信吗?”,开始问“这个来源对于这个特定句子足够强吗?”
本指南围绕七个维度——来源类型、设计、直接性、元数据、版本状态、更正通知和主张范围——构建可重复的评估系统,并展示如何将不同的入口点(新稿件、修订、同行评审、团队项目)引导通过该系统,同时保持可审计的方法轨迹。该框架与既有的研究指南一致:NIH 将仔细评估先验知识、优势、弱点、知识空白、透明方法、验证和可重复性视为严谨实践的核心;Cochrane 建议根据纳入标准规划检索、使用多个来源、记录过程并链接同一研究的多份报告;PRISMA 2020 提供报告清单和流程图模板,以实现透明的检索、选择和综合。
为什么“可信来源”是错误的单位
可信度是关系性的。随机试验是平均处理效应的强证据,却是机制的弱证据。病例报告是患病率的弱证据,却可以是现象存在的决定性证据。因此,评估问题总是成对的:这个来源,对于这个主张,在这个强度上。
这种配对使方法轨迹可审计。当审稿人问为什么一个句子措辞谨慎时,你应该能够指出来源、限制它的维度以及随后的措辞决定。
七维评估系统
在来源进入主张之前,按以下维度对每个来源评分。将分数保存在工作表中,而不是记在脑子里;表格成为你的审计轨迹。
1. 来源类型
分类项目是什么:原始研究、系统综述、指南、预印本、会议摘要、论文或报告。来源类型设定了该项目可以被引用的上限。综述可以锚定综合主张;单个原始研究锚定具体发现。
2. 设计
记录来源实际使用的设计——试验、队列、病例对照、建模研究、定性研究等——并注意对你的主张重要的特征(对照组、随访、验证)。NIH 指南将验证和可重复性置于严谨性的中心,因此设计笔记应包括方法是否报告得足够透明以便评估。
3. 直接性
直接性问的是来源的人群、干预、结局和设置与你的主张有多接近。不同人群中的发现不是错误的;它是间接的,间接性应该体现在你的措辞中。
4. 元数据
捕获作者、年份、发表场所、标识符以及你阅读的确切版本。元数据让合著者或审稿人能够检索到同一项目。Cochrane 强调记录检索过程和去重记录,这是在收集阶段应用的同一纪律。
5. 版本状态
标记项目是预印本、接受稿还是正式发表版本,以及你参考的是哪个版本。版本状态随时间变化,因此给笔记标注日期。
6. 更正通知
检查项目附带的勘误、更正、关注声明或撤稿通知,并记录检查日期。更正可能改变你的主张所依赖的数字。
7. 主张范围
写下来源旨在支持的确切句子,然后将其强度与来源概况进行比较。范围是其他六个维度兑现的地方。
匹配强度与主张的决策表
使用此表作为初步分类。它将主张的类型映射到可以承载它的来源概况以及保持在证据范围内的措辞。
| 你想提出的主张 | 最低来源概况 | 适合的措辞 | 避免的措辞 |
|---|---|---|---|
| “X 在人群 P 中导致 Y” | 具有对照组、直接人群、透明方法的原始研究 | “在[研究]中,X 与 P 中的 Y 相关” | 无保留地“X 导致 Y” |
| “证据一致显示 X” | 系统综述或多个独立的原始研究,检查重叠 | “关于此文献的综述报告……” | 将一项研究引用为“文献” |
| “实践中推荐 X” | 指南或共识文件,版本已检查 | “当前指南推荐……”(附版本日期) | 从单项研究推断建议 |
| “X 是合理的” | 机制或建模工作,明确标记 | “建模工作表明……” | 将合理性呈现为已证明的效果 |
| “没有研究探讨过 X” | 有记录的、多来源的检索,附纳入标准 | “我们的检索未发现符合……的研究” | “不存在研究” |
最后一行是最常被错误处理的。Cochrane 关于检索多个来源、结合自由文本和主题词并记录过程的指南,正是将缺失主张转变为关于你的检索而非关于世界的可辩护陈述的关键。
实例:审计稿件中的一个主张
假设草稿句子为:“干预 A 在临床人群中改善结局 B。”
- 分解主张。 人群:临床。干预:A。结局:B。强度:“跨”暗示广度。
- 列出当前附带的来源。 记录每个来源的类型、设计和直接性。
- 测试广度词。 “跨”需要系统综述或在不同人群中的多项独立研究。如果你只有一个人群中的一项试验,这个词承担了证据无法承载的工作。
- 检查版本和更正。 确认每个附带来源是你阅读的版本,并且没有影响结局 B 的更正。
- 重写以符合范围。 “在[人群]的一项试验中,干预 A 与结局 B 的改善相关。”主张现在与其来源一样强。
- 记录决策。 记录原始措辞、限制维度和修订后的句子。该日志是你的方法轨迹。
这个六步循环是系统的核心;以下各节将其适应不同的入口点。
在评估之前建立检索轨迹
评估的好坏取决于你评估的来源集。根据纳入标准规划检索,使用多个来源,结合自由文本术语和主题词,去重,分阶段筛选,并链接同一研究的多份报告,以免同一研究被重复计数。Cochrane 正是这样排列顺序,PRISMA 2020 提供了报告脚手架——清单和流程图模板——使轨迹对读者和审稿人清晰可读。
对于检索步骤本身,WisPaper 检索 提供学术检索界面以查找学术论文,WisPaper Scholar Search 提供查找学术论文的公共入口。记录你运行的查询和日期,以便轨迹在提交前重新运行时得以保留——Cochrane 建议在发表前重新运行检索。
在一个地方组织来源和元数据
一旦检索到候选文献,元数据维度需要一个归宿。将你正在评估的论文保存或上传到 My Library,以便你评估的集合就是以后可以检索的集合。随进度为每个项目附上七维笔记;没有版本日期和更正检查日期的来源只评估了一半。
当评估集很大且你需要查询它时——例如,检查几篇保存的论文关于一个结局的说法——Library QA 支持基于上传到 My Library 或从搜索结果添加的论文提问。用它来呈现段落,然后返回来源本身以确认你的主张将依赖的措辞。
按入口点为读者导航
同一系统服务于不同的起点。选择与你所在位置匹配的路线。
路线 A:开始新稿件
从纳入标准和有记录的检索开始,然后在来源进入草稿时逐维评估。在写句子之前构建表格的主张范围列,以便措辞跟随证据而非相反。如果你正在为新项目范围界定文献,Research Projects 为你提供创建和组织工作的场所。
路线 B:同行评审后修订
从审稿人的评论开始,而不是整个参考文献。识别受到挑战的具体主张,提取其附带的来源,仅重新评分直接性、版本和更正。重写以符合范围并记录更改。审稿人对可见的轨迹反应良好:原始主张、限制维度、修订主张。
路线 C:审阅他人的稿件
按后果顺序评估主张。对于每个主要主张,检查引用的来源是否存在、引用的版本是否为当前版本,以及主张的强度是否与来源概况匹配。将广度词(“跨”、“一致”、“已确立”)标记为最高收益的目标。
路线 D:协调研究团队
就七个维度和决策表达成一致一次,然后要求每个团队成员在共享库中记录分数。指派一人在提交前不久重新检查版本状态和更正通知,因为这些维度随时间变化。
保持方法轨迹可审计
可审计的轨迹有四个属性:精确命名来源、记录每次检查的日期、说明限制维度,并展示随后的措辞决定。PRISMA 2020 的流程图模板是此类轨迹形状的有用模型——输入、排除和最终纳入集——即使你的项目是叙述性稿件而非系统综述。
两个习惯保护轨迹。首先,为每个版本和更正检查标注日期;没有日期的检查无法审计。其次,将原始和修订主张并排放置,使推理可见而非重建。
当轨迹需要引文检查时
参考文献列表会漂移。在提交前,对照真实的学术数据库筛选 BibTeX 条目,以便在审稿人发现之前标记幻觉或不匹配的参考文献;TrueCite 正是为这个 BibTeX 引文筛选步骤而构建。在你的主张范围重写之后运行它,因为重写有时会改变哪些参考文献仍然附带。




