人工智能

Bayer Crop Science 如何在 Amazon Bedrock AgentCore 上借助 AWS Unified Operations 构建智能体决策引擎

植物育种决策所依赖的数据横跨基因组学、田间试验、影像、环境条件和模型输出。Bayer Crop Science 针对这些数据、跨作物、区域和团队运行数百种机器学习(ML)模型配置,而且每次运行都需要可重复并受到治理。为满足这一要求,Bayer 构建了互联决策引擎(CDE),这是一个用于部署、编排、监控和复用 ML 工作流的系统。CDE 为育种人员、分析师、研究人员、数据科学家和数据工程师提供了一致的方式来运行分析,同时保留执行历史和运维控制。

随着采用范围扩大,瓶颈从运行工作流转移到了理解工作流。解释一个结果意味着要从 API、文档、元数据存储、仪表板和日志中拼凑上下文。想要知道工作流为何失败、模型做了什么或结果来自何处的用户,仍然必须知道该检查哪个系统。为弥合这一差距,Bayer 构建了智能体决策引擎(ADE),这是一个位于 CDE 之上的多智能体自然语言界面。一个监督智能体将每个问题路由给专业智能体,专业智能体从相关系统检索上下文,用户无需浏览运维技术栈即可获得答案。在第一阶段,ADE 无需工程师介入即可解决约 80% 的用户问题。

ADE 运行在 Amazon Bedrock AgentCore, 上,这是一项 AWS 服务,可使用任意框架或模型大规模构建、连接和优化智能体。AgentCore 让团队能够专注于智能体行为,而不必自行构建和运维智能体托管、会话隔离和工具访问层。三项 AgentCore 能力促成了这一选择:隔离每个用户会话的托管运行时;通过 AgentCore Gateway(Amazon Bedrock AgentCore 的一项能力)实现由 AWS Identity and Access Management (IAM) 限定范围的工具访问,从而将身份验证和授权保持在智能体代码之外;以及与框架无关的设计,让团队能够自带 LangGraph 编排并自行选择模型。

为准备上线并在之后运维 ADE,Bayer 与 AWS Unified Operations. 合作。此次合作提供了一名专属技术客户经理(TAM)和一名生成式 AI 领域专家工程师(DSE),他们从设计到生产阶段作为 ADE 团队的延伸开展工作。TAM 作为 Bayer 的战略顾问,带来了对 Bayer 运营模式和业务优先事项的既有理解。DSE 带来了 AWS 上的生成式 AI 领域专业知识。在每周三次的技术例会上,团队进行审查并做出设计决策。DSE 建立了对 ADE 工作负载以及 Bayer 团队运作方式的实际了解,因此技术指导既反映了 AWS 服务行为,也结合了 Bayer 的实际情况。本文讲述这一历程:ADE 架构、构建期间做出的五项设计决策、为生产环境准备平台所做的工作,以及上线后如何运维。

架构概览

ADE 分为四层:用户体验、智能体编排、专业智能体,以及这些智能体调用的工具和数据源(图 1)。用户通过 React Web 前端访问 ADE,请求在到达智能体之前会经过 Microsoft Entra ID 的身份代理。GitHub Actions 构建智能体容器镜像,将其推送到 Amazon Elastic Container Registry (Amazon ECR), 并部署到 AgentCore runtime(Amazon Bedrock AgentCore 的一项能力)。

Amazon Bedrock AgentCore runtime 托管智能体,而且由于该运行时与框架无关,团队可以直接在其上运行自己基于 LangGraph 的编排。团队选择 LangGraph,是因为它具有显式的基于图的控制流,以及面向多步骤工作流的检查点机制。LangGraph 编排工作流,Supervisor Agent 作为入口点,对每个请求进行分类、选择专业智能体,并在问题跨领域时合并结果。数据平面按职责分离。 Amazon DynamoDB 存储 LangGraph 检查点状态。 Amazon Aurora PostgreSQL 存储会话记录、用户反馈和分析数据。 Amazon ElastiCache 以生存时间(TTL)缓存智能体响应。 Amazon Simple Storage Service (Amazon S3) 中的领域内容使用 Amazon Titan Text Embeddings V2 进行嵌入,并在 Amazon OpenSearch Serverless 中建立索引,用于检索增强生成(RAG)。 Amazon CloudWatch 捕获运行时和应用遥测数据。AgentCore Gateway 将后端 API 作为 Model Context Protocol (MCP) 工具暴露给智能体,并将身份验证和授权保持在智能体代码之外。

Agentic Decision Engine architecture: user experience, orchestration, specialist agents, and tools and data source layers

图 1:Amazon Bedrock AgentCore 上的智能体决策引擎架构

ADE 在生产环境中运行 22 个专业智能体,每个智能体都限定于一个领域,并拥有自己的工具和数据源。例如,领域专家智能体通过 RAG 回答概念性问题。运维智能体从 CDE 检索实时工作流状态和结果。故障排查智能体分析运维遥测数据。可视化智能体生成图表或返回现有仪表板。客户特定的 Models as Skill 模式将模型代码和文档转换为存储在中央注册表中的技能定义,因此智能体依据模型的实现而非通用模型知识来回答模型特定问题。

当育种人员问“我的表型分析工作流昨天为什么失败了?”时,主管会对意图进行分类,并将请求路由到故障排查智能体。该智能体通过 AgentCore Gateway 读取 CloudWatch 中的工作流遥测数据以及 CDE API 中的状态,识别故障点,并通过主管返回诊断结果(图 2)。育种人员无需直接搜索日志。借助故障排查智能体,过去需要花一个多小时手动查找日志并等待工程师支持的诊断,现在只需不到 10 分钟。

Request flow diagram for the Agentic Decision Engine. A user question enters the Supervisor Agent, which classifies the intent, checks the Amazon ElastiCache response cache, and routes the request to the appropriate specialist agent. The specialist retrieves grounded context from the relevant system, such as the CDE API through AgentCore Gateway or telemetry in Amazon CloudWatch, and returns a composed answer to the user.

图 2:ADE 请求流程:意图分类、缓存查找、专家路由和响应

通往生产环境的五项设计决策

统一运维 TAM 和 DSE 作为工作团队成员参与了以下决策,而不是事后作为升级点介入。这让 Bayer 能够在做出承诺之前,针对 AWS 服务行为测试每项设计,同时保留对架构的所有权和最终决定权。

1. 将编排状态外部化,同时不把运行时视为无状态

AgentCore 运行时提供隔离会话,可在会话生命周期内跨调用保留执行上下文。该上下文并不是多步骤工作流的持久存储。ADE 将 LangGraph 检查点写入 DynamoDB,以便图在横向扩展事件、重启或会话边界之后能够恢复,而不依赖某个执行环境始终保持可用。

原则: 将运行时会话用于主动执行,并将恢复或重建工作流所需的状态持久化到持久服务中。

2. 分离企业身份、网关访问和下游授权

Bayer 将 Microsoft Entra ID 标准化用于用户身份,而 ADE 的服务则使用 AWS 原生机制相互授权。团队没有强行让一个令牌跨越每个信任边界,而是为每个边界提供了自己的机制。

Entra ID 仍然是用户身份的来源。AWS Identity and Access Management (IAM) 负责服务间调用的授权。AgentCore Gateway 出站授权负责访问下游 CDE 服务。请求拦截器 AWS Lambda 函数执行自定义验证,并传递下游工具所需的授权属性。团队与 DSE 一起梳理了每一跳的令牌契约。

原则: 智能体系统中的身份故障集中在用户身份、智能体身份和工具身份之间的转换处。在每一跳定义签发者、受众、声明、作用域和凭证生命周期,而不是将一个对某个边界有效的令牌复用到下一个边界。

3. 将模型选择视为接口契约

在构建过程中,团队评估了一个启用了推理模式的较新模型版本。对于该版本,ADE 所依赖的工具使用和结构化输出的组合与其智能体的实现方式不兼容。DSE 确认了这一限制,团队为该版本保留了当前模型。

原则: 对于使用工具的智能体,模型选择受完整接口的约束:工具调用、结构化输出、流式行为、推理功能、延迟、配额可用性以及模型特定的请求语义。较新的模型并不自动就是可直接替换的替代品。

4. 在工具面控制提示之前先控制工具面

CDE 管理着 500 多个模型配置。为每个 API 配备专用 MCP 服务器会增加部署、身份验证和版本管理开销。ADE 改为向 AgentCore Gateway 注册 OpenAPI 规范,从而将 REST 操作作为 MCP 工具暴露。添加或更改 API 变成了模式和网关配置的变更,而不是部署新服务器。

工具模式和描述还会消耗输入令牌,并与用户请求和检索到的上下文竞争。ADE 按专家智能体限定工具范围,而不是让每个智能体都获得完整目录。对于更大的目录,AgentCore Gateway 支持语义工具搜索,因此智能体无需在每一轮加载整个目录即可找到相关工具。

原则: 按智能体限定工具目录范围。每个工具定义都会增加令牌并扩大模型的决策空间。

5. 将复杂能力从工具提升为智能体

可视化最初是由其他智能体调用的工具。随着其发展,它需要自己的数据检索、图表选择逻辑、重试、错误处理,以及决定是生成图表还是返回现有仪表板。团队将其移入专门的 Visualization Agent。该智能体在 AgentCore Code Interpreter(Amazon Bedrock AgentCore 的一项能力,提供沙箱化代码执行环境)中使用 matplotlib 和 Plotly 生成按需图表,并通过 Amazon S3 与其交换数据。当预构建仪表板是更好的答案时,该智能体会返回现有的 Amazon Quick 或 Power BI 资产。

原则: 工具执行有界操作。当某项能力开始拥有状态、重试、规划、策略或呈现决策时,就应将其建模为智能体。

为生产环境准备 ADE

随着构建工作走向发布,重点从设计转向可运维性:检测智能体故障、归因推理成本以及加固部署。

可观测性:衡量任务失败,而不仅仅是异常

主管架构会将一个用户请求转变为一系列模型调用、工具调用和智能体交接。即使每个 HTTP 请求都成功,最终答案也可能是错误的。ADE 直接遇到了这种情况:应用程序异常处理器捕获了智能体错误,并返回了被监控系统计为成功的响应。在与 DSE 复现该问题后,团队在失败路径内添加了自定义 CloudWatch 指标,并针对智能体特定条件设置了告警:工具调用错误、限流、模型超时和结构化输出验证失败。跟踪和调用日志会跨主管和专家跟踪每个请求。

原则: 区分传输成功与任务成功。智能体可观测性应显示任务是否完成、是哪个智能体或工具改变了结果,以及响应是否使用了预期的来源。

成本归因:将账单归因与请求级遥测相结合

一个 ADE 请求可能调用多个模型和工具,因此账户级 Amazon Bedrock 支出无法解释单位经济性。团队与 DSE 共同设计了归因方法,采用三种机制来回答不同的问题。Amazon Bedrock 应用程序推理配置文件将计费的模型使用量归因到某个应用程序或工作负载。请求元数据和模型调用日志将令牌使用量与特定的智能体、功能或请求关联起来。IAM 主体归因增加了身份维度。三者结合,使团队能够估算每次交互的成本、识别高成本智能体,并确定是提示词、检索到的上下文还是工具定义驱动了令牌使用。在实践中,依赖 MCP 工具和多次工具调用的 Visualization 和 Operational 智能体消耗的令牌最多。

同一遥测在发布准备期间发现了一个工作负载,其具有大量重复的输入前缀,且没有提示缓存活动。对于受支持的模型,将稳定的指令和工具定义放入可缓存的提示前缀中,可减少重复的输入处理,从而降低延迟和令牌成本。对于 ADE,缓存稳定的提示前缀将输入令牌成本降低了 20–30%。

安全与发布就绪

IAM 角色按每个智能体的职责范围进行限定。Troubleshooting Agent 可以读取其诊断所需的运营数据,但无法修改工作流。Domain Expert Agent 可以查询其检索索引,但不能调用无关的 CDE API。在当前生产环境中,ADE 的智能体响应受以下机制约束:最小权限、按每个智能体限定的只读工具访问、对智能体响应的结构化输出验证,以及基于检索到的 CDE 数据和遥测而非开放式生成的答案。Bayer 还计划评估 Amazon Bedrock Guardrails,作为这些控制措施的额外一层,补充 CDE 多轮工作流中已使用的自定义安全检查。

在发布之前,Unified Operations 与 ADE 团队一起开展了关键工作负载审查和 Well-Architected 审查(使用生成式 AI 镜头)。由于 DSE 已经了解该工作负载,两项审查都针对 ADE 的具体故障模式、容量风险和部署缺口,而非通用最佳实践。发现的问题包括:主管和专家智能体之间的故障可见性缺口、可变容器镜像标签、镜像可追溯性有限以及缺少漏洞扫描。团队通过更强的告警、不可变的版本化镜像、Amazon ECR 中的推送时扫描以及未使用镜像的生命周期策略予以回应。

DSE 还与团队一起审查了扩缩容和配额需求。负载测试验证了应用程序及其服务配额,并暴露了一种返回空响应的网络故障模式,团队在生产活动之前修复了该问题。到发布时,团队已与 Unified Operations 一起跟踪并解决了 35 个阻塞项。

发布、运营与后续步骤

Bayer 将 ADE 发布给一个受控群体,而非一次性向整个组织开放。自发布以来,Bayer Crop Science 已有超过 100 名用户使用 ADE,包括育种人员、分析师、研究人员、数据科学家和工程师。除 22 个专家智能体外,ADE 还暴露了约 20 个 API 工具,并可在扩展时托管第三方智能体。通过 AgentCore Gateway 而非为每个 API 配备专用服务器来暴露这些 API,将每个 API 的集成开销降低了 99% 以上。在第一阶段,ADE 已在无需工程师介入的情况下解决了约 80% 的用户问题。

CDE 仍然是分析的有治理执行层。ADE 在其上增加了自然语言层,因此用户无需了解每个底层系统的位置或界面,即可询问工作流状态、结果、模型行为和故障。

此后,合作重点从发布就绪转向持续运营。DSE 继续与团队会面,因此问题分诊和运营审查从对 ADE 的既有了解出发,而非重新熟悉。ADE 的关键 CloudWatch 告警(包括前文所述的智能体特定告警)已接入 AWS Incident Detection and Response。当告警触发时,AWS 事件管理工程师会在 5 分钟内介入,并从该工作负载的上下文出发,而非从零开始。在安全方面,AWS Security Incident Response 工程师在潜在或活跃安全事件期间为团队提供支持,因此 ADE 在运营和安全问题方面均具备 AWS 监控与响应覆盖。

由于智能体间通信已经就位,Bayer 接下来将重点放在混合云智能体互操作性上。团队正在探索在不同环境中运行的智能体如何在没有手动配置的情况下相互发现和通信。

结论

Bayer 并未用 ADE 替换其分析平台。它让 CDE 更易于查询和运营。大部分生产工作都在提示词之外:持久状态、身份边界、工具范围限定、任务级可观测性、成本归因和发布就绪。Bayer 拥有架构以及上述每一项决策。通过与 AWS Unified Operations 的指定 DSE 和 TAM 合作,团队在设计期间根据 AWS 服务行为测试了这些决策,并将相同的上下文带入生产环境。

如需了解更多,请探索 Amazon Bedrock AgentCore, Amazon Bedrock 成本归因, AWS Well-Architected 生成式 AI 指南, 以及 AWS Unified Operations.

作者感谢 Sijie Shi、Jorge Gomes、Naveen Reddy、Iago Fonseca、Mateus Silva 和 Sushimitha Jarugula 对 ADE 的设计、开发和发布所做的贡献。


关于作者