先了解这件事
AI 综述
Pydantic 的 Michael Pfaffenberger 构建了一项对比 code mode 与直接工具调用的基准,使用 5 个小型 Pydantic AI 应用和 8 个模型,共完成 5,276 次评分运行。结果显示,在长任务上 code mode 平均成本降低 58%、耗时降低 51%、成功率提高 16 个百分点;但在 5 条目的短任务中,5 个任务里有 3 个反而贵了 21% 到 38%。Michael Pfaffenberger 认为,模型写循环比充当循环更擅长,且差距随任务变长而扩大。目前该基准结果已由 Pydantic AI 官方文章发布。
AI 根据公开报道生成
最新进展 · 正式报道
Pydantic 用 5,276 次运行对比 code mode 与工具调用事件进展
1 个已确认进展
- 来源：Pydantic AI 官方文章
报道与讨论时间线
按时间查看正式报道与传播讨论；两类内容的证据等级保持独立。
10月28日
Pydantic AI 官方文章一手精选
Pydantic 用 5,276 次运行对比 code mode 与工具调用
Pydantic 的 Michael Pfaffenberger 用 5 个小型 Pydantic AI 应用、8 个模型做了 5,276 次评分运行，对比 code mode 与直接工具调用。长任务上 code mode 平均成本降 58%、耗时降 51%、成功率提高 16 个百分点；但 5 条目的短任务在 5 个任务中有 3 个反而贵了 21% 到 38%。作者认为模型写循环比充当循环更擅长，差距随任务变长而扩大。