先了解这件事
AI 综述
2025年1月23日,Benedict Evans 提出判断:更好的模型仍无法提供确定正确的答案。他指出,生成式 AI 在软件开发与营销领域已找到明确产品市场契合点,因为错误容易被发现,且答案本身无对错之分;但在需要“正确”而非“更好”答案的任务上,LLM 仍不可用。他以 ChatGPT 4o 查询 1980 年美国电梯操作员人数为例,称正确答案为 21,982,而无论冷启动、提供原始 PDF 还是要求联网,模型均给出错误数字,用户在不亲自核对的情况下无法判断对错。他认为这类错误率是当前技术的根本属性,而非靠更多工程就能弥合的差距。目前尚无后续发展事实。
AI 根据公开报道生成
最新进展 · 正式报道
更好的模型就更强吗?——Benedict Evans 谈生成式 AI 的确定性困境事件进展
1 个已确认进展
- 来源:Benedict Evans:Blog
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
1月23日
Benedict Evans:Blog
更好的模型就更强吗?——Benedict Evans 谈生成式 AI 的确定性困境
Benedict Evans 指出,生成式 AI 在软件开发与营销领域已找到明确产品市场契合点,因为错误易被发现且答案本身无对错之分;但在需要“正确”而非“更好”答案的任务上,LLM 仍不可用。他以 ChatGPT 4o 查询 1980 年美国电梯操作员人数(正确答案 21,982)为例,无论冷启动、提供原始 PDF 还是要求联网,模型均给出错误数字,且用户无法在不亲自核对的情况下判断对错。他认为这类错误率是当前技术的根本属性,而非靠更多工程就能弥合的差距。