Hao AI Lab 用 200 个侦探案件测试 GPT6-Astra 与 Jev 智能体集群
2️⃣ On 100 easier cases, where few witnesses lie:
AI 导读
Hao AI Lab 让三种侦探组合在 200 个维多利亚时代伦敦案件中找出凶手、动机和藏身处,每个案件有 100 个地址、10 名嫌疑人和 12 小时时限。在 100 个较简单案件中,GPT6-Astra 带领 12 个 Jev 智能体解决 96 个,GPT6-Astra 单独解决 57 个,Jev 集群单独解决 38 个;在 100 个更难、付费证人多于诚实证人的案件中,三者分别为 93、59 和 42 个,而基于规则的领导者加 Jev 集群仅解决 0 至 1 个。团队结论是让快速智能体跑腿、由强推理者负责思考。
正文
当前显示原文,中文全文译文尚未就绪。
2️⃣ On 100 easier cases, where few witnesses lie: • 🏅 GPT6-Astra leading 12 Jev agents solve 96 • 🥈 GPT6-Astra alone solves 57 • 🥉 Jev swarm alone solves 38
In the easier cases each lie comes from a lone witness, while every true fact turns up twice. So a rule-based leader just counting clues + Jev swarm finds the truth and solves 97/100.
"Elementary, my dear Watson."