先了解这件事
Letta 发布 FrontierMemory 基准,用于测试智能体能否把过往经验转化为后续任务表现,而非仅检索事实。据 The New Stack 报道,测试结果显示 Letta Dream 以 73.3% 居首,Prime Agent 为 60%,OpenAI Agents SDK 为 40%,Claude Managed Agents 和 Hermes Agent 分别为 33.3% 和 26.7%。在记忆生成环节,Claude Opus 5.5 与 GLM-5.3 以 73.3% 并列第一;GPT-6.1 Sol 每任务成本约 0.77 美元,低于 Opus 5.5 的 2.80 美元和 GLM-5.3 的 3.58 美元。报道称该基准目前仅含 15 个任务、每任务一次尝试,后续将加入更长任务和在线记忆更新。
AI 根据公开报道生成
最新进展 · 正式报道
Letta 发布 FrontierMemory 基准:五个智能体框架记忆测试成绩差距明显事件进展
1 个已确认进展
- 来源:The New Stack
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
10月23日
The New Stack
Letta 发布 FrontierMemory 基准:五个智能体框架记忆测试成绩差距明显
Letta 发布 FrontierMemory 基准,测试智能体能否把过往经验转化为后续任务表现,而非仅检索事实。结果显示 Letta Dream 以 73.3% 居首,Prime Agent 为 60%,OpenAI Agents SDK 为 40%,Claude Managed Agents 和 Hermes Agent 分别为 33.3% 和 26.7%。在记忆生成环节,Claude Opus 5.5 与 GLM-5.3 以 73.3% 并列第一,但 GPT-6.1 Sol 每任务成本约 0.77 美元,低于 Opus 5.5 的 2.80 美元和 GLM-5.3 的 3.58 美元。该基准目前仅含 15 个任务、每任务一次尝试,后续将加入更长任务和在线记忆更新。