←事件详情

热点事件

Benedict Evans 提出更好模型仍无法给出确定正确答案

1 篇正式报道1 条事件动态更新于 1月23日 03:58

先了解这件事

AI 综述

2025年1月23日,Benedict Evans 提出判断:更好的模型仍无法提供确定正确的答案。他指出,生成式 AI 在软件开发与营销领域已找到明确产品市场契合点,因为错误容易被发现,且答案本身无对错之分;但在需要“正确”而非“更好”答案的任务上,LLM 仍不可用。他以 ChatGPT 4o 查询 1980 年美国电梯操作员人数为例,称正确答案为 21,982,而无论冷启动、提供原始 PDF 还是要求联网,模型均给出错误数字,用户在不亲自核对的情况下无法判断对错。他认为这类错误率是当前技术的根本属性,而非靠更多工程就能弥合的差距。目前尚无后续发展事实。

AI 根据公开报道生成

最新进展 · 正式报道

更好的模型就更强吗?——Benedict Evans 谈生成式 AI 的确定性困境

事件进展

1 个已确认进展

  1. Benedict Evans 提出更好模型仍无法给出确定正确答案

    来源:Benedict Evans:Blog

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

1月23日

  1. Benedict Evans:Blog

    更好的模型就更强吗?——Benedict Evans 谈生成式 AI 的确定性困境

    Benedict Evans 指出,生成式 AI 在软件开发与营销领域已找到明确产品市场契合点,因为错误易被发现且答案本身无对错之分;但在需要“正确”而非“更好”答案的任务上,LLM 仍不可用。他以 ChatGPT 4o 查询 1980 年美国电梯操作员人数(正确答案 21,982)为例,无论冷启动、提供原始 PDF 还是要求联网,模型均给出错误数字,且用户无法在不亲自核对的情况下判断对错。他认为这类错误率是当前技术的根本属性,而非靠更多工程就能弥合的差距。

关联事件

  1. 相关事件OpenAI发布GPT-6 Astra模型
  2. 相关事件OpenAI在DevDay发布Dots、GPT-6.1 Sol及多项平台功能
  3. 相关事件Air Street Press 发布第九份年度 AI 现状报告
  4. 相关事件Anthropic发布Claude Opus 5.5