AI 文献综述工作流:检索、核查与综合

博客EasyLaTeX发布于

AI 可以帮助检索、分类和整理论文,但综述是否可靠,取决于文献覆盖是否充分、每项结论能否追溯到原文。把 AI 输出当作待核验的工作稿:保留纳入理由和页码证据,再由研究者检查原始论文,之后才写成综述。

近期两项预印本展示了这种做法的机会与边界。SurveyWeave 将综述拆成论文收集、提纲生成、文献归类和综合写作,并允许后续评审意见返回修改前面的步骤。另一项以 102 篇气象学论文为已知语料的研究,则测试 AI 工具能否找到、理解并综合文献。它们是特定评测,不代表所有学科或所有工具的表现。

两项研究说明了什么

SurveyWeave 在 36 个计算机科学和机器学习主题上报告了 87.5 的平均 WeaveEval 分数,最强的自动综述基线为 81.3;每篇综述平均约需 113 分钟,按 API 标价约 27.80 美元。它的评测包含模型评分,测试主题也有限,因此分数不能解释为所有领域中的事实准确率或普遍效果。

102 篇论文基准测试中,五种 AI 工具合计找到了已知语料里的 57 篇,没有一种在首次检索中找到超过 42 篇。配对的访问测试显示,Codex 在研究者登录大学图书馆前后找到 42 篇和 82 篇;Claude Code 找到 15 篇和 79 篇。提供完整语料后,工具识别出全部 18 篇实质讨论目标主题的论文,但也把 40%–79% 仅顺带提及主题的论文误判为实质相关。这项研究只测了一个气象学主题以及特定版本、权限条件,不能把比例套用到所有文献检索。

流程示意图,不是产品截图,也不是对论文系统的复现。

建立可追溯的综述流程

1. 先写清问题和边界

在检索前记录研究问题、时间范围、主题词、研究类型,以及纳入和排除标准。列出同义词和容易混淆的相邻主题。系统综述或范围综述应保存方案;若调整标准,要记录调整内容和原因。

2. 采用多种检索路径

选择本领域数据库,并按需补充预印本平台或出版社站内搜索。记录数据库、完整检索式、日期、过滤条件,以及是否能使用机构订阅或全文。对关键论文向前、向后追踪引用。先按 DOI 去重,再用规范化标题和年份复核。搜索结果只是候选集,不能默认完整。

3. 筛选并记录理由

用同一套标准筛选标题、摘要和全文。每条记录保留唯一编号、引文信息、筛选结论、理由和来源位置。暂时无法访问的论文应记为“无法获取”,不要直接当成无关文献。基准研究显示,机构访问权限会明显改变工具能找到的论文数。

4. 先建证据矩阵,再写段落

每篇论文记录研究问题、方法与场景、样本或数据、主要结果、局限,以及支持每项摘录的页码或章节。区分论文作者报告的发现和你跨论文归纳出的解释。短引文可帮助定位,但要回到 PDF 核对,不能用引文替代综合分析。

仅为模板示意。行和文字是例子,不是从两项研究中提取的数据。

5. 按研究问题综合,而非逐篇摘要

围绕机制、方法、人群、结果或研究分歧归类。比较研究时核对实际条件和测量指标,标出相互矛盾的结果、尚未覆盖的人群和证据空白。现有研究不足以支撑时,不要称其为“共识”。

6. 人工核查来源

逐项或抽样对照主要论断与引用原文:论文是否存在、页码是否支持该说法、转述有没有改变研究对象、方法或不确定性。另检查旧文献、出版社覆盖、无法获取的全文和重复记录。模型表达得有把握,不代表证据充分。

可复用的逐篇提取提示词

给模型固定字段,让它逐篇处理或使用可追踪的小批次;原文没有的信息留空或标记未报告,不让模型补全。

Plain text
仅依据提供的论文,按字段返回:- 论文编号和原文可见的完整引文信息- 研究问题与研究设计- 研究对象、数据或场景- 主要结果,保留单位和适用条件- 简短支持性原文引句及 PDF 页码- 作者明确说明的局限- 相关性:核心、背景或排除,并说明理由​原文未提供的信息写“未报告”。不要推断因果关系、共识、统计显著性或缺失数值。区分论文自身结论与分析者的解释。把待核实问题另列清单。

抽取后重点核对数字、分母、子组定义和引文。论文较多时,让第二位研究者复核筛选规则及部分提取记录。

在 LaTeX 中连接证据和参考文献

下面的短例子展示研究问题、证据表和 BibTeX 引用。表格行是说明格式的虚构示例,使用前应替换为已经核实的记录。

LaTeX
\documentclass{article}\usepackage[margin=1in]{geometry}\usepackage[numbers]{natbib}\usepackage{booktabs}​\begin{document}\section{Review question}How should an AI-assisted literature review track search coverage and evidence?​\begin{table}[htbp]\centering\small\caption{Illustrative evidence ledger; verify each entry against its source.}\begin{tabular}{@{}p{0.15\linewidth}p{0.31\linewidth}p{0.43\linewidth}@{}}\topruleSource & Question & Evidence to verify \\\midruleStudy A & How does search access affect coverage? & Database, query, access route, and omitted records \\Study B & How well does synthesis reflect papers? & Claim, supporting page, limitations, and reviewer judgment \\\bottomrule\end{tabular}\end{table}​Treat each cited statement as a claim that must be checked in the source \citep{zhang2026surveyweave,alkalbani2026benchmark}.​\bibliographystyle{plainnat}\bibliography{references}\end{document}

将下面内容保存为 references.bib。引文元数据应逐条与来源核对:

bibtex
@misc{zhang2026surveyweave,  author        = {Zhang, Franklin and Yang, Xiao and Dong, Xin Luna and Hu, Juhua},  title         = {SurveyWeave: An Agentic Framework for Automated Survey Generation},  year          = {2026},  eprint        = {2611.19029},  archivePrefix = {arXiv}}​@misc{alkalbani2026benchmark,  author        = {Al Kalbani, Abdullah and Schultz, David M. and Anderson-Frey, Alexandra K. and Zheng, Zhonghua and McGuire, Catherine},  title         = {Can Large Language Models Review the Scientific Literature? A Test Against a 102-Article Benchmark},  year          = {2026},  eprint        = {2611.05459},  archivePrefix = {arXiv}}

编译顺序为 pdflatex main.tex、bibtex main,再运行两次 pdflatex main.tex 解析引用。检查 .blg 和 .log 中的缺失引用键和文献处理错误。期刊模板可能需要不同的引用命令或参考文献设置。

从证据笔记到综述初稿

可以让助手根据已检查的证据矩阵起草一个章节,并要求每个事实论断标出来源编号。之后逐条回到矩阵检查,并由作者完成论证和编辑。整理好 .tex 项目后,可用 EasyLaTeX 编辑和编译,参阅从项目到 PDF 的指南。参考文献记录可参阅核查参考文献的流程。这并不表示 EasyLaTeX 集成或运行 SurveyWeave 等研究系统。

来源与适用范围

SurveyWeave 主要测试计算机科学与机器学习主题,并使用模型评分;102 篇论文研究只覆盖一个气象学主题和特定工具版本。应将结果理解为对这些评测的观察,而非普遍性能保证。