AI 热点

OpenAI Astra for Law 6.2 登顶 Harvey LAB-AA v1.1

Artificial Analysis更新于 11月18日 02:32

OpenAI leads Harvey LAB-AA v1.1 with Astra for Law 6.2, a specialized GPT-6.2 Astra configuration with an integrated legal search index

AI 导读

OpenAI 的 Astra for Law 6.2 在 Harvey LAB-AA v1.1 法律基准上以 20.8% 的 Hallucination-Gated All-Pass Rate 排名第一,GPT-6.2 Astra (max) 以 15.0% 位居第二。Astra for Law 6.2 是 GPT-6.2 Astra 的专用配置,搭配扩展的法律检索索引与研究、权衡判例、撰写答案的指令。该基准包含 24 个执业领域的 120 项私有任务,并在主指标中对模型幻觉进行惩罚。

正文 · AI 翻译

OpenAI 凭借 Astra for Law 6.2 领跑 Harvey LAB-AA v1.1,该配置是 GPT-6.2 Astra 的专用版本,集成了法律检索索引

OpenAI 将 Astra for Law 6.2 描述为 GPT-6.2 Astra 的一种模型配置,它将模型与扩展的法律检索索引以及用于研究问题、权衡判例和撰写答案的指令相结合。

我们对 Harvey LAB 基准的实现测试了跨 24 个执业领域的 120 项私有任务中的真实法律工作,并在其主指标 Hallucination-Gated All-Pass Rate 中对幻觉进行惩罚。Astra for Law 以 20.8% 的得分领跑 Harvey LAB-AA v1.1。GPT-6.2 Astra (max) 以 15.0% 位居第二。

来源

Artificial Analysis