在阅读任何研究之前,先编写一份代码本,为每个评估条目写明哪些证据算作充分、会触发哪种判断,从而定义判断参数。NHLBI 的设计专用工具把评审者的注意力集中在内部效度以及研究方法或实施中的潜在缺陷上,并要求使用者自行定义判断参数。Cochrane 的 RoB 2 展示了可以照搬的结构:信号问题、书面理由,以及针对某一项具体随机试验结果的最终判断——低风险、存在一些担忧或高风险。
按顺序构建代码本
- 确定判断单元。对 RoB 2 而言,判断单元是一项具体的随机试验结果,因此要记录每项判断覆盖哪个结局和时间点。对 NHLBI 工具而言,在编写任何条目规则之前,先把工具与研究设计匹配起来。
- 列出每个条目及其信号问题。逐字照抄工具的措辞,使评审者回答同一个提示。
- 为每个条目编写判定规则。写明哪些证据算作充分、哪些证据算作不充分,以及各自产生什么判断。对于随访条目,要规定最短持续时间、可接受的失访比例,以及研究报告两者都未提供时如何处理。
- 为部分证据添加打破平局的规则。说明信息缺失时是给出“存在一些担忧”还是向作者索取资料,并记录这一选择。
- 在两三项研究上试用代码本,然后在全面评估之前修订含糊的规则。
可用的规则是什么样
诸如“充分随访意味着研究报告了随访持续时间以及具有结局数据的参与者比例”这样的规则,让两位评审者执行同一项检查。每位评审者都可以标记为满足、不满足或不清楚,并引用支持该标记的页码或表格。RoB 2 为每项判断配一份书面理由,因此要求每个条目都附上同样的引用。
保持判断一致
让两位评审者独立地把代码本应用于同一项研究,并比较条目层面的结果。分歧指向需要更清晰措辞的规则;修订代码本,并对受影响的研究重新应用。把最终代码本与综述一起保存,使读者能看到每项判断是如何得出的。
