先了解这件事
2026年10月10日,TensorZero推出自动化AI工程师Autopilot,用于自动分析数据并优化LLM智能体。据TensorZero工程博客介绍,Autopilot可分析LLM可观测性数据、搭建评测、优化提示词与模型并运行A/B测试,由其11.5K星开源LLMOps平台驱动。团队在terminal-bench、航空与零售客服、NER、FHIR医疗、中文法律选择题、ReplicationBench和猜词游戏等任务上,以GPT-5 mini为基线各采集100次rollout,再用5个独立种子运行Autopilot,并在留出任务上以100次新rollout评估,称每个任务都有提升,例如terminal-bench从0.404提升到GLM-5变体的0.637。实验限定在成本相近的固定模型集合内并关闭微调。团队计划将Autopilot做成持续异步流程并推出自助产品。
AI 根据公开报道生成
事件进展
1 个已确认进展
- 来源：TensorZero 工程博客
报道与讨论时间线
按时间查看正式报道与传播讨论；两类内容的证据等级保持独立。
10月9日
TensorZero 工程博客一手
TensorZero 推出自动化 AI 工程师 Autopilot，称在多项基准上提升 LLM 智能体表现
TensorZero 正在构建自动化 AI 工程师 TensorZero Autopilot，它分析 LLM 可观测性数据、搭建评测、优化提示词与模型并运行 A/B 测试，由其 11.5K 星开源 LLMOps 平台驱动。团队在 terminal-bench、航空与零售客服、NER、FHIR 医疗、中文法律选择题、ReplicationBench 和猜词游戏等任务上，以 GPT-5 mini 为基线各采集 100 次 rollout，再用 5 个独立种子运行 Autopilot 并在留出任务上以 100 次新 rollout 评估，称每个任务都有提升，例如 terminal-bench 从 0.404 提升到 GLM-5 变体的 0.637。实验限定在成本相近的固定模型集合内并关闭微调，团队计划将 Autopilot 做成持续异步流程并推出自助产品。