先了解这件事
AI 综述
2024年9月19日,FutureHouse发布工程博客,公布其科学文献智能体RAG系统PaperQA2的研究成果。该博客介绍PaperQA2的设计与实验,称其在回答高难度科学问题、撰写综述文章和检测文献矛盾等任务上超过科学家的表现。团队基于LitQA2的200道专家多选题评测发现,智能体式查询扩展、LLM重排与上下文摘要(RCS)、引用遍历对准确率重要,而嵌入模型选择、混合关键词嵌入、chunk大小和结构化解析影响不大。新增的引用遍历工具通过Semantic Scholar和Crossref API前后各遍历一度引用,提升了正确论文的召回率。目前该研究仍以工程博客形式呈现,尚无后续发展事实。
AI 根据公开报道生成
最新进展 · 正式报道
FutureHouse 详解 PaperQA2:如何让科学 RAG 超越科学家表现事件进展
1 个已确认进展
- 来源:FutureHouse Research
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
9月19日
FutureHouse Research一手
FutureHouse 详解 PaperQA2:如何让科学 RAG 超越科学家表现
FutureHouse 发布工程博客,介绍其科学 RAG 系统 PaperQA2 的设计实验,称其在回答高难度科学问题、撰写综述文章和检测文献矛盾等任务上超过科学家的表现。团队基于 LitQA2 的 200 道专家多选题评测发现,智能体式查询扩展、LLM 重排与上下文摘要(RCS)、引用遍历对准确率重要,而嵌入模型选择、混合关键词嵌入、chunk 大小和结构化解析影响不大。新增的引用遍历工具通过 Semantic Scholar 和 Crossref API 前后各遍历一度引用,提升了正确论文的召回率。