AI 热点

Databricks 开放 Genie ZeroOps Pipeline Agent 公开测试

Unite.AI更新于 11月20日 06:27

Databricks Opens Public Beta for Genie ZeroOps Pipeline Agent

AI 导读

Databricks 于 2026 年 11 月 19 日开放 Genie ZeroOps 公开测试,这款数据管道智能体可自动检测故障、调查原因并准备修复方案。它能汇集日志、源代码、表元数据与血缘信息,使用 SQL 定位根因,并在隔离沙箱中通过单元测试和 dry run 验证修复。ZeroOps 未经批准不会更改生产代码或数据,但会持续使用大语言模型处理所选资产,当前监控范围为作业、管道和表。

推荐理由

AI 评分 69

公开测试展示了从故障检测到受控修复的完整流程,也明确列出持续 AI 处理、共享权限与外部通知的企业部署取舍。

主题

标签

正文 · AI 翻译

Databricks 于 2026 年 11 月 19 日开放 Genie ZeroOps 公开测试,此前已对其自主数据管道智能体进行有限预览测试。该公司称,在有限预览期间,ZeroOps 观察到了超过 80,000 个真实客户问题。

ZeroOps 可检测故障、调查原因并准备修复方案。此次测试版新增了共享收件箱、概述每个问题及相关建议的通知、适用于公司特定工作流的自定义指令,以及为 Git 支持的作业一键创建拉取请求的功能。

有限预览测试覆盖了数百家公司。Databricks 表示,超过一半的问题需要具备组织特定知识,才能得到妥善分类、排序和解决。这一发现促使其推出相关功能,让团队能够标记已知的不稳定数据源、首选修复方案和命名约定,或者过滤预期内的故障及优先级较低的通知。

从检测到经审核的修复方案

ZeroOps 不仅会监控明确的作业和管道故障,还会监控停止更新或行数异常偏少的表,因为这些问题未必会触发常规作业故障。它会汇集日志、源代码、表元数据和血缘信息,运行 SQL 查询以确定根本原因,并根据对下游的影响确定发现项的优先级。在应用任何修复方案之前,系统会在隔离沙箱中通过单元测试和试运行对其进行验证。

检测到问题后,调查会自动启动。系统内置对运行历史记录、数据质量信号以及 Unity Catalog 血缘信息的访问能力;后者用于映射资产之间的依赖关系,从而将代码诊断结果与数据状态关联起来。警报可以发送到 Slack、Microsoft Teams、PagerDuty 或通用 webhook,但不支持电子邮件接收地址。

审批与数据控制

未经批准,ZeroOps 不会更改生产代码或数据。文档所述的防护措施要求,在推送由 Git 支持的修复方案之前,必须获得用户的明确指令和确认;推送操作会新增一个提交,但不会强制推送或重写分支历史记录。将某个存储库的默认分支指定为目标可能绕过拉取请求审核,除非分支保护规则阻止直接推送。

Databricks 表示,该智能体通过其安全边界内由 Databricks 托管的端点使用 Anthropic 和 OpenAI 模型。选择资产即授权系统持续、自主地使用大语言模型进行处理,直至该功能被禁用;对于由 Git 支持的作业,处理内容还包括存储库内容。在外部通知纳入某项发现的标题或摘要之前,该智能体会检查其中是否含有姓名、电子邮件地址等敏感信息,并对发现的敏感信息进行遮蔽。存储在外部系统中的副本不受 Databricks 的保留和删除控制约束。

一项配置最多可与 25 名工作区个人用户共享,但不能与群组或服务主体共享。协作者可以处理其中的发现项,但即使无权访问底层资产,共享用户仍能看到代码摘录、建议的修复方案和示例数据行。共享配置并不会授予对这些资产的访问权限。

设置要求与测试版范围

管理员必须在工作区的 Previews 页面中启用 Genie ZeroOps。随后,用户可选择资产,但需拥有这些资产的 OWNER、CAN MANAGE 或 CAN VIEW 权限。设置过程会先回填过去 24 小时内的发现项,然后再报告新问题。调查 Git 存储库需要具备读取权限的凭据;创建拉取请求分支则需要写入权限。

Databricks 于 2026 年 6 月 16 日推出 ZeroOps,当时计划在有限预览中支持作业、管道、表和机器学习工作负载。当前文档指出,其监控范围涵盖作业、管道和表,不包括模型或应用;性能和成本回退也不在其检测范围内。该测试版在工作区级别而非账户级别运行,不符合 HIPAA 要求;若要检测延迟到达或不完整的表数据,还需使用单独计费的数据质量监控功能。

ZeroOps 将调查和修复方案准备工作自动化,同时将生产环境的控制权留给客户。该测试版对企业而言的核心权衡是:以持续使用 AI 处理所选运维数据为代价,减少人工诊断工作;这也意味着,共享内容的可见性、外部通知和 Git 审核都应作为部署环节的一部分,而非彼此独立的管理细节。

来源

Unite.AI