在使用任何人工智能工具之前,先写好三个部分来建立人工智能辅助综述治理协议:允许用途清单、每项输出的人工核验要求,以及为每条人工智能辅助主张记录来源位置的监督日志。
- 界定允许与排除的用途。 列出人工智能可以协助的综述任务,例如起草摘要、筛选标题和摘要,或核对参考文献元数据。指明哪些任务的人工智能输出必须经具名审稿人签字确认后才能进入稿件。把每项允许用途对应到它所服务的综述阶段,使审稿人能从协议判断某一操作是否在范围内。
- 按输出类型设定核验标准。 核验方式要与主张相匹配。对于偏倚风险判断,Cochrane RoB 2 方法要求提供信号问题和支持低风险、一些疑虑或高风险结论的书面理由;审稿人应确认理由本身存在,而不只是标签。对于报告透明度,PRISMA 2020 列出了清单和流程图条目,涵盖为何开展综述、使用了哪些方法,以及发现并纳入了哪些研究;应依据这些条目检查人工智能起草的方法和结果文本。对于参考文献列表,使用引文核查工具,例如 WisPaper TrueCite,它会把 BibTeX 与真实学术数据库比对,标出需要核验的参考文献,然后到原始来源逐条确认被标出的条目。
- 为每次人工智能输出记录来源位置。 使用包含以下列的监督日志模板:
- 输出编号与日期
- 工具与版本
- 任务与提示词摘要
- 稿件位置(章节、段落或行)
- 支持该主张的来源位置(页码、章节、表格或记录标识符)
- 审稿人姓名与核验结果
- 状态:接受、修改或升级处理
- 应用升级处理规则。 如果某条人工智能辅助主张没有可追溯的来源位置,将其标记为升级处理,并在审稿人找到支持段落或删除该主张之前,将其排除在稿件之外。在日志中记录升级处理的原因和解决措施。
- 在每个稿件里程碑审查日志。 在每个稿件或资助申请里程碑,检查每条人工智能辅助条目是否都有审稿人姓名、来源位置和已关闭状态。届时仍未关闭的条目成为下次审稿人会议的议程。
