←事件详情

热点事件

Amazon AGI 发布 audit-then-score 协议与数据集

1 篇正式报道1 条事件动态更新于 6月3日 23:56

先了解这件事

AI 综述

2026年6月3日,Amazon AGI 发布 audit-then-score 协议及配套的 DeepFact-Bench 测试集与 DeepFact-Eval 核查系统。该协议让 AI 模型挑战并修正人工标注的基准答案,据 Amazon Science 报道,专家在隐藏测试集上的准确率从 60.8% 提升至 90.9%。DeepFact-Eval 以 GPT-4.1 为底层模型时,在 DeepFact-Bench 上达到 83.4% 准确率,高于最佳传统事实核查系统的 58.5% 和强先前深度研究系统的 69.1%。目前尚无后续发展事实。

AI 根据公开报道生成

最新进展 · 正式报道

Amazon AGI 提出 audit-then-score 协议,事实核查准确率从 60.8% 提升至 90.9%

事件进展

1 个已确认进展

  1. Amazon AGI 发布 audit-then-score 协议与数据集

    来源:Amazon Science

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

6月3日

  1. Amazon Science一手

    Amazon AGI 提出 audit-then-score 协议,事实核查准确率从 60.8% 提升至 90.9%

    Amazon AGI 团队提出 audit-then-score 协议,让 AI 模型挑战并修正人工标注的基准答案,使专家在隐藏测试集上的准确率从 60.8% 提升至 90.9%。该协议配套 DeepFact-Bench 测试集和 DeepFact-Eval 核查系统,后者以 GPT-4.1 为底层模型时在 DeepFact-Bench 上达到 83.4% 准确率,高于最佳传统事实核查系统的 58.5% 和强先前深度研究系统的 69.1%。

关联事件

  1. 相关事件LG AI Research 在 CVPR 2026 展示 VinQA 论文
  2. 相关事件Chroma提出生成式检索基准方法
  3. 相关事件Physical Intelligence发布世界模型机器人策略评测研究
  4. 相关事件Prime Intellect发布自主研究能力评测