←新闻详情

Latent Space更新于 11月3日 07:48

Legora CTO Jacob Lauritzen 谈在看不到数据的情况下构建法律智能体

Building Legal Agents When You Can't See the Data - Jacob Lauritzen, CTO of Legora — Latent Space

AI 导读

Latent Space 访谈 Legora CTO Jacob Lauritzen,讨论在无法读取律师使用数据的前提下如何构建和测试法律智能体。Legora 由三名工程师和三名律师搭建模拟客户工作的测试环境,并用 1 万份文件的数据室做验证;Jacob 估计模型目前能做好约 60% 的法律工作,某次发布后引用准确率从 70% 提升到 99%。他还谈到为何多年不加模型选择器、为何全部跑在 Azure 上,以及 Tabular Review 表格审阅功能。

推荐理由

AI 评分 53

Legora CTO 讲清在看不到客户数据的前提下如何搭建测试环境和评测体系,对做垂直 Agent 的团队有参考价值。

主题

标签

正文 · AI 翻译

Legora 无法读取其智能体为律师所做的任何一条执行轨迹。这些数据属于律所的客户。当你看不到智能体的工作时,你该如何构建和测试它?Jacob Lauritzen 是 Legora 的 CTO,该公司是……Latent.Space 11月2日·67分钟 收听本次对话 67分钟 阅读文字稿 在 YouTube 上观看

Legora 无法读取其智能体为律师所做的任何一条执行轨迹。这些数据属于律所的客户。当你看不到智能体的工作时,你该如何构建和测试它?

Jacob Lauritzen 是 Legora 的 CTO,该公司是法律科技史上增长最快的公司之一。团队最初在斯德哥尔摩的一间地下室里起步,用的是 ChatGPT、瑞典法律和一个搜索工具。如今,律师可以用 Legora 起草和编辑 Word 文档、在单张表格中审阅 1 万份合同,或开展尽职调查。该智能体还会协调律师、客户和其他智能体之间的工作。当 Legora 进行自己的收购时,团队就用它来做尽职调查。

我们聊了什么

• 为什么 Legora 多年来一直拒绝添加模型选择器,以及为什么最终又加上了

• Jacob 估计模型目前已经能做好约 60% 的法律工作,以及为什么剩下的部分需要更聪明的模型

• 三名工程师和三名律师如何基于客户的工作构建测试环境,很像强化学习中使用的“世界”

• 一个引用问题:模型一开始的正确率是 70%,一次发布后达到 99%。Legora 什么都没改。

• 为什么 Legora 把所有东西都跑在 Azure 上,以及为什么它不用 ElevenLabs

• Tabular Review,那个百万单元格的电子表格,业界连名字都照抄了

• 受理流程如何运作,智能体如何创建列表,以及一个列表如何启动另一个智能体

• 法律工程师和前置部署工程师各自做什么,以及谁有权写代码

• Jacob 用来论证 20 名工程师永远够用的“300 斯巴达人”幻灯片。现在有 100 人了,他仍然觉得人手不够。

• 为什么 Jacob 觉得 Fable 和 Opus 在起草时太啰嗦,而喜欢 Astra 简洁的写作

• 为什么起草一份长合同是一个搜索问题

• 模型实验室是否会像切断编程工具那样切断法律工具

• 律所合伙制、计费工时和初级律师的工作会怎样

Legora 正在纽约、斯德哥尔摩和伦敦招聘工程师。

章节

0:00 冷开场

1:05 从斯德哥尔摩地下室里的弱者起步

1:54 Legora 如何从结合瑞典法律的 ChatGPT 成长为法律智能体

4:12 从助手到智能体的转变

5:23 Legora 使用哪些模型,以及为什么添加了模型选择器

7:48 当今的模型对律师来说够好吗?

8:20 九个月前智能体做不到的事

9:18 在模拟世界和 1 万份文件的数据室中测试智能体

10:07 评估团队和 Legora 的 100 名法律工程师

11:03 当评估似乎不值得做时,以及一次发布如何把引用准确率从 70% 提升到 99% 赞助 你的赞助广告位在这里 触达正在构建未来的 AI 工程师。

Latent Space 的读者正是那些交付智能体、模型和基础设施的人。咨询赞助此广告位:business@latent.space →

12:18 五到十年后法律实践可能是什么样

14:18 律所合伙制模式会存续吗?

16:40 律师助理和初级律师会怎样?

18:00 计费工时,以及为什么早期的法律科技未能达标

19:39 现在钱流向哪里

22:44 Legora 如何用自己的产品做收购尽职调查

23:59 瑞典和美国律所有何不同

26:12 当你无法读取执行轨迹时的产品指标

27:41 转述执行轨迹,把失败归纳到 10 或 20 种类型

28:42 为什么数据隐私促使 Legora 把所有东西都跑在 Azure 上

30:04 开放权重模型和模型套利

30:55 转写模型,以及为什么 Legora 不用 ElevenLabs

33:33 智能体、Tabular Review、项目以及 Word 插件

34:24 律师如何使用 Tabular Review

35:51 为什么电子表格行得通,以及你从前 10 行能学到什么

37:53 法律受理机器人在 Slack 中如何运作

39:11 智能体如何创建列表,列表如何启动智能体

40:15 在这些相同组件上构建产品并收购 Wexler

42:37 前置部署工程师在 Legora 做什么

43:52 法律工程师和前置部署工程师如何让一个大客户上线

46:43 前置部署团队未来一年要做什么

47:24 为什么 Legora 一直抗拒构建 API

49:26 智能体本身能成为 API 吗?

50:12 “300 斯巴达人”幻灯片和把工程师保持在 20 人的计划

51:32 没人要求 Legora 下的赌注

53:05 为法律研究后训练开放权重模型

54:05 搜索、检索和后期交互

54:51 什么造就了好的法律智能体框架,以及为什么起草取决于搜索

56:25 哪个模型写得最好?

57:03 幻觉和 Legora 的引用系统

57:41 律师会核对引用吗?

58:19 对于百万 token 的合同,用 MapReduce 还是一个大上下文窗口?

1:00:16 获取匿名化示例,以及为数据而收购一家律所的想法

1:01:53 为什么 Jacob 建议不要默认使用嵌入

1:02:44 律师会在 Legora 里工作,还是通过 Claude 工作?

1:03:26 模型实验室会切断 Legora 吗?

1:04:24 法学院和为计算机科学专业学生设立的奖学金

1:06:09 为什么大多数工作最终都会变成法律工作

联合主持 — swyx,Latent Space

主持 — Basil Chatha,Forward Deployed

保持领先一步。

来源

Latent Space