arXiv cs.CL· Zhaoqian Xue, Shaoze Zhou, Xuexin Li, Junting Mu, Haozheng Liu, Zhongyin Wang, Yichun He, Renkai Ma, Hao Zhou, Sarah Bratt, Siyuan Ma, Chen Chen, Lingyao Li·· 2 天前AI 评分32
ReviewPilot：面向系统综述筛选与数据提取的多智能体系统
ReviewPilot: A Multi-Agent System for Screening and Data Extraction in Systematic Reviews
AI 导读
研究团队开发了对话式多智能体系统 ReviewPilot，将 PRISMA 流程从论文筛选自动化到信息提取，每条筛选决定附带理由、每个提取值标注来源。在流行病学专家综述上，ReviewPilot 在三种 LLM 上均优于单提示词 LLM 和 AgentSLR，筛选 macro F1 最高 0.776，提取 F1 最高 0.788。
正文 · AI 翻译
作者：Zhaoqian Xue、Shaoze Zhou、Xuexin Li、Junting Mu、Haozheng Liu、Zhongyin Wang、Yichun He、Renkai Ma、Hao Zhou、Sarah Bratt、Siyuan Ma、Chen Chen、Lingyao Li
摘要：系统性文献综述遵循 PRISMA 流程，对学术成果进行筛选并从纳入研究中提取证据。基于大语言模型（LLM）的深度研究工具可以检索和总结文献，但不会记录哪些研究被排除，或提取值来自何处。我们开发了一个名为 ReviewPilot 的对话式多智能体系统，可自动完成从论文筛选到信息提取的 PRISMA 工作流。研究人员可以通过对话定制标准和模式，项目记忆会保存其配置和修订。每个筛选决策都附带理由，每个提取值都附带来源。在流行病学专家评审中，ReviewPilot 在三个 LLM 上均优于单提示 LLM 和 AgentSLR，筛选宏 F1 最高达 0.776，提取 F1 最高达 0.788。生物医学和人机交互领域的案例研究表明，其与人类标注者高度一致，表明 ReviewPilot 可以迁移到流行病学之外。代码可在 此 https URL 获取。
| 主题： | 计算与语言（cs.CL）；人工智能（cs.AI）；信息检索（cs.IR） |
| 引用为： | arXiv:2610.21042 [cs.CL] |
| （或 arXiv:2610.21042v1 [cs.CL] 用于此版本） | |
| https://doi.org/10.48550/arXiv.2610.21042 由 DataCite 颁发的 arXiv DOI（待注册） |
提交历史
来自：Zhaoqian Xue [查看邮箱]
[v1]
2026年10月15日星期四 00:34:38 UTC（6,481 KB）
来源：arXiv cs.CL · arxiv.org