Anthropic 发布 Claude Duet 研究预览版并公布其安全、隐私与安全设计
Claude Duet Safety, Privacy, and Security
Anthropic 发布研究预览版 Claude Duet,这是一个在云端计算机上持续运行、可读取收件箱、起草回复、预订事项并在你离开后执行例程的主动型智能体。它在发送敏感消息、付款或删除内容前会展示操作、目标与内容并等待批准,证券交易、账户间转账等操作即使批准也不允许。新增的安全分类器把信息分为绝不分享和需同意分享两级,密码、浏览器 cookie 和登录 token 不经过模型,浏览器运行在独立虚拟机中。
推荐理由
精选AI 评分 62
原文逐项说明了主动型智能体在审批、敏感信息分级和凭据隔离上的设计取舍,可供评估同类代理产品的安全边界。
主题
正文 · AI 翻译
Claude Duet 是一个主动型智能体,即使你不在,它也会为你工作。它建立在两层保护之上:Claude 模型本身的安全训练,以及 Claude Code 和 Claude Managed Agents 等产品中已有的防护措施。在此基础上,我们新增了针对跨账户操作和代表你行事的保护措施。
Claude Duet(在新标签页中打开)是一个目前处于研究预览阶段的智能体,它使用基于云的计算机为你完成工作。它可以使用你选择连接到 Claude 的所有应用和服务,并且即使你关闭应用后也会持续运行。它可以读取你的收件箱、起草回复、预订事项,并在你离开时运行例程。我们的团队在自己的账户上运行 Claude Duet,我们每天都用它来工作。
我们基于三项原则构建了 Claude Duet,以指导该智能体的行为:
你的信息,以及他人在你连接的应用中分享的内容,都会得到谨慎处理,使用一个新的分类器在 Claude Duet 起草的消息发出前进行检查。
你始终掌控它代表你所做的事情。
Claude Duet 永远不会看到你的密码、浏览器 cookie、登录令牌或其他凭据。
Claude Duet 是全新的,但其背后的思考并非如此。2025 年,我们发布了安全可信智能体框架(在新标签页中打开),该框架将人置于控制地位,并将隐私和安全交互视为基本要求。此后,我们撰文阐述了为何单一防御措施不够(在新标签页中打开),以及为何模型内部的保护无法独立存在(在新标签页中打开)。我们还通过 Claude Managed Agents(在新标签页中打开)构建并运营企业用于在生产环境中运行智能体的基础设施,而 Claude Duet 同样将凭据与智能体分离。它建立在这项工作之上,增加了代表你行事的智能体所需的保护措施。本文将介绍我们新增的内容以及仍在努力的方向。
重要操作由你批准
在你离开时行事的智能体必须知道何时停下来请求许可再继续,并且要以恰当的节奏这样做。在 Claude Duet 执行诸如发送可能敏感的消息、付款或删除任何内容等操作之前,它会向你展示操作、目标以及内容,包括每一位收件人。然后它会等待你批准该操作。
每项操作都会同时运行一项独立的自动化检查,该检查基于 Claude Code 的自动模式分类器(在新标签页中打开)构建,并为 Claude Duet 做了扩展。它会评估该操作是否符合你的意图。该检查在执行工作的模型之外运行,因此页面中隐藏的指令无法影响结果。
有些操作即使你批准也仍然禁止,例如交易证券、在账户之间转移资金等银行操作,以及访问他人的账户。还有一些步骤不受“别再问我”规则覆盖,无论你批准过多少次,例如付款或转账、删除订单或创建账户。在你离开时运行的例程也享有同样的保护措施。
我们花了大量时间校准 Claude Duet 请求批准的频率。批准疲劳是一个严重问题,因为过多的请求会让人养成随手点过的习惯,有时并未充分考虑。我们将持续调整这一校准。
对于购物,Claude Duet 使用来自 Stripe 的 Link 等钱包的一次性卡进行支付,该卡仅限于该商户和该金额。你会看到商品和总额,并在 Link 应用中批准购买。你的真实卡号不会与 Claude Duet 或商户共享。
你的信息会被谨慎处理
一个读取你的电子邮件并代你发送消息的智能体,时刻都在决定不同类型的信息应该流向何处。如果你让 Claude Duet 向团队发送每周回顾,它应只包含团队中每个人本就有权访问的内容,绝不包含私人细节,例如你的绩效评估对话。
为解决这一问题,我们构建了一个新的安全分类器,它与主模型分开运行,检查 Claude Duet 即将发送的每条消息是否包含潜在的敏感信息。我们将这类信息分为两个层级:
绝不分享:我们对登录凭据、完整卡号和银行账号以及政府身份证件号码等信息给予最高级别的保护。Claude Duet 被指示绝不与任何人分享这些信息,即使你要求也不行。
需要同意才能分享:Claude Duet 只有在获得你明确批准的情况下,才会分享健康或财务等其他私人信息。你自己的请求即视为同意,因此“给我的牙医发条消息说说我的牙痛”通常不需要额外批准。
如果 Claude Duet 因上述任一原因被拦截,它可以决定重写消息、去掉敏感信息,然后交给你审批后再分享。
Claude Duet 仍处于研究预览阶段,这些防护措施偶尔会漏掉某些内容,或误标一条无害的消息。正因如此,它们与上述审批机制协同工作,这些机制旨在让你始终掌控 Claude Duet 代表你发送的内容。随着我们对人们如何使用 Claude Duet 的了解不断深入,我们预计会继续改进分类器。
你可以查看任务和已连接的应用
你可以在任务列表中看到 Claude Duet 已完成和正在做的事情,每个任务都有自己的页面,你还可以在任务进行中引导它。Claude Duet 会保留你的对话历史和它的记忆,以便在任务之间延续上下文,直到你删除或重置历史记录。删除账户会清除 Claude Duet 存储的所有内容。
你已连接到 Claude 的应用会延续到 Claude Duet,在一处关闭某个应用,两处都会关闭。断开某个应用的连接会从那一刻起停止新的访问,但 Claude Duet 已从该应用学到的内容会保留,直到你重置其记忆——你可以随时在该应用的设置中重置。Claude Duet 还会使用你 Claude 账户中的记忆,因此 Claude 从你早先聊天中记住的细节是可见的。
凭据和浏览器与模型隔离
Claude Duet 永远不会看到你的密码、浏览器 cookie 或你所连接应用的登录令牌,也无法将它们保存到其记忆中。它们只会经过模型无法访问的独立机器,而支配其行为的审批和安全检查也在那里运行。
密码
当网站要求输入密码时,你在 Claude 应用内的表单中输入密码。该表单使用一次性密钥对其进行加密,该密钥仅存在于我们安全的云浏览器机器上,且仅用于那一次使用。它将加密后的密码原封不动地传递给浏览器,由浏览器将其输入到网站中。模型看不到密码,也无法保存或重复使用它。很快你还可以使用 1Password 登录;Claude Duet 将请求凭据,你将在 1Password 中批准该请求,凭据将直接发送到浏览器,而不经过模型。
替你登录的智能体会以两种方式改变网络钓鱼的格局。一方面,Claude Duet 不为你持有凭据,因此它无法被钓鱼获取密码,也没有任何隐藏指令能让它泄露它并不拥有的秘密。另一方面,登录表单本身就是攻击目标,因为任何要求输入密码的东西都可能被仿冒。因此,Claude Duet 的登录表单只会出现在应用内,且仅在你主动发起登录时出现。它绝不会以链接、短信、电子邮件或 claude.ai 以外网站的形式出现。如果有任何看起来像 Claude Duet 的东西在其他地方要求你输入密码,那都不是合法的。
当 Claude Duet 在已连接的应用中工作时,它会遵循我们的 Claude 托管智能体设计(在新标签页中打开),以确保凭据始终处于智能体工作范围之外。智能体代表你使用的凭据,例如已连接服务的登录令牌,绝不会进入智能体工作所在的机器。取而代之的是,那里只放置凭据的占位符,而该机器外部的代理仅在发出请求时才填入真实值。
浏览器
Claude Duet 中的浏览器运行在云端一台专属的虚拟机中,与模型以及智能体工作所用的云计算机相互隔离。智能体仅通过一组固定命令来驱动浏览器:打开此页面、点击此处、输入此内容。网站运行的任何内容都留在浏览器机器上(在新标签页中打开)。网站代码和 cookie 不会进入 Claude Duet 的记忆或你连接的应用,智能体的任何命令也都无法从浏览器中读取 cookie。真正返回的是页面文本和下载内容,因为智能体必须读取它们才能完成工作。正因如此,才需要其他检查,也正因如此,Claude Duet 还采用了我们在浏览器使用研究(在新标签页中打开)中所述的提示注入防护措施。它通过浏览器上传的文件会接受与其消息相同的敏感信息检查。
Claude Duet 在设计上还会表明自己是智能体。目前,其网页浏览器发送的请求包含一个独特的 User-Agent 标头,并且我们会公布它浏览时使用的公共 IP 地址,以便网站能够识别它并决定如何处理它。在发布之前,我们还联系了多家大型网站,给它们选择阻止 Claude Duet 访问其网站的权利,其中一些网站选择了阻止。随着我们从研究预览中不断学习,我们将持续改进 Claude Duet 表明自身身份的方式。
我们如何测试 Claude Duet
测试早在研究预览版发布之前就已开始,并持续至今。我们的安全防护团队基于日常形态的任务构建了评估,每项任务都有三个变体:一个无害版本、一个注入了指令的版本,以及一个诱使智能体做出超出其被要求范围之事的版本。这些评估与来自真实使用的影子流量并行运行。
红队进一步测试了 Claude Duet 是否会泄露信息、未经批准就行动,或遵循恶意提示。我们为整个系统构建了威胁模型,涵盖它所触及的各个代码仓库和信任边界。一家外部渗透测试公司在可访问我们源代码的情况下对 Claude Duet 进行了测试,而一项涵盖云浏览器和登录表单的后续合作正在进行中。每项新的凭据功能在向任何人发布之前,都会在隔离装置上进行红队测试。
Claude Duet 也在 Anthropic 公开漏洞赏金计划的范围内,该计划奖励有效的报告,并根据我们的负责任披露政策为善意研究提供安全港。如果你发现安全漏洞,我们希望听到你的反馈:请通过 HackerOne 上的 Anthropic 漏洞赏金计划(在新标签页中打开)进行报告。
与你共同构建
我们将 Claude Duet 作为研究预览版发布,是因为我们想了解你在个人智能体中看重什么,包括你希望接下来看到哪些保护措施和控制选项。本文描述的部分内容仍在变化中:它请求批准的频率、你的登录方式,以及敏感信息检查在区分私密信息与无害信息方面的准确程度。用平实的语言告诉 Claude Duet 你希望看到什么或哪里出了问题,它就会为我们的团队提交一份报告。
相关文章
探索更多产品新闻以及团队使用 Claude 构建的最佳实践。
Claude Cowork 与聊天功能为 Enterprise 合而为一
完整的 Claude 平台,现已在 Google Cloud 上提供
在 Google Cloud 上使用 Claude 模型(由 Anthropic 管理),即可通过 Google Cloud 的身份验证、账单和承诺抵扣来使用 Claude 平台功能。
HCLTech 作为全球首要合作伙伴加入 Claude 合作伙伴网络
HCLTech 将把 Claude 融入其为银行、医院、电信公司和制造商提供的解决方案中。
隆重推出 Claude Duet
借助 Claude 转变组织的运营方式
产品更新、操作指南、社区聚焦等。每月发送至你的收件箱。
负责任披露政策
数据处理协议:美国 K-12
负责任披露政策
数据处理协议:美国 K-12