6个最佳实践提高AI编排平台的韧性
作者: CBISMB
责任编辑: 邹大斌
来源: CBISMB
时间: 2026-10-29 11:49
关键字: AI智能体 ,可观测性 ,编排平台 ,运行时治理 ,Tokenomics
浏览: 435
点赞: 21
收藏: 2
尽管许多组织还处在AI智能体的早期部署阶段,研究显示,未来一年会有更多组织把智能体和助手扩展到更大规模。2026年8月的一份报告指出,66%的企业可能在未来12个月投资数字员工。报告称,这些智能体的首要要求包括可验证的准确性、对决策的清晰解释,以及人类可覆盖的能力。
走到某个阶段,IT、数据和安全负责人就必须考虑如何管理、监控和度量生产环境中的数千个AI智能体。这正是AI智能体编排平台的价值所在,它们正在成为智能体之间、人与智能体之间交互的中心控制平面。
SAP首席AI官兼平台与AI负责人Jonathan von Ruden表示:“智能体编排的未来取决于开放性。除非智能体能够通过开放、可互操作的标准通信,否则组织不会放心让它们跨应用、跨云、跨公司边界工作。开放标准有助于客户避免碎片化的AI环境,加快采用,并对智能体如何访问企业数据、流程和治理保持控制。”
在研究方法以评估AI智能体编排平台时,我梳理出这一较新品类中60多个商业和开源平台。本文给出六条专家建议,指向真正支撑韧性的能力。
衡量结果与业务价值
Tokenomics,即追踪和管理AI智能体的成本与所交付的业务价值,是一项重要的AI FinOps能力,需要在所有已部署的智能体上一致地度量。顶级平台会把财务控制与其他关键指标并列考量,例如信任度、客户影响和碳排放。
Verint首席技术官Rob Scudiere表示:“每个智能体都必须对照营收增长、客户留存、客户满意度、成本下降、eNPS和产能提升来衡量,这些正是CFO已经在看的数字。度量上的缺口意味着你无法证明ROI、无法优化路由,也无法判断下一步该往哪里投。”
建议:对快速部署AI智能体却不衡量价值与成本的组织来说,AI成本债是一种风险。仅这一项能力,就足以成为投资AI智能体编排平台的理由。
部署前先跑评估
负责任的DevOps工程师会编写单元测试,并在部署流水线中建立持续测试。AI智能体的对应物是编写评估,即用自然语言表述来判断智能体的准确性及其他质量因素。
Typeface研发总裁Vishal Sood说,没有评估的智能体编排,等于没有测试的CI/CD。“评估和遥测告诉你输出是否合格,并把结果反馈到下一轮运行。一条不做检查就上线的流水线不是韧性,只是快;每个在软件上吃过这个教训的团队,马上要在智能体上再学一遍。”
建议:考察平台的评估引擎,例如Databricks中LLM评审的能力、Snowflake的智能体评估、LangChain的评估平台、Agentforce的评估反馈回路,以及Dataiku的评估智能体。
建立运行时治理
先部署、再补治理,是云迁移与现代化时代的常见做法,但用在AI智能体上很危险。智能体往往能访问企业的知识产权、客户数据和其他敏感信息,因此一致的角色基访问控制是部署智能体的必要前提。此外,在应用和API都是确定性的年代,规定谁能访问什么的硬规则已经够用;但面对AI智能体,你必须在运行时结合请求的上下文来评估治理策略。
UiPath编排业务高级产品营销经理Chetak Shankar表示:“如果说有一项能力同时驱动采用与韧性,那就是内建于执行过程的治理,而不是事后补上。这意味着策略在智能体行动的那一刻就被执行,审计轨迹在那一刻就被记录,而不是等出了故障再回溯重建。”
Onyx Security联合创始人兼首席AI官Gil Elbaz补充说:“智能体的速度和复杂度,要求运行时防护能够理解用户意图,在行为发生时实时评估,并确保智能体依据组织自己的治理与运行时策略,始终走在允许的路径上。”
对于自研AI智能体的组织,开发团队需要实施标准,尤其是在用AI代码生成器开发时。1Password首席技术官Nancy Wang说:“用API和自动化,为特定任务授予范围狭窄、短时有效的访问权限,验证是谁授权的,并在任务完成后撤销。开发者保留了机器速度的工作流,而凭证始终在智能体触及不到的地方,每一个动作都可归因、可审计。”
建议:随着组织部署更多智能体,访问策略与授权需要集中管理,工作流也会用到Model Context Protocol和智能体之间的交互。
统一决策可观测性
实现可观测的应用与数据管道,已是DevOps的事实标准。但掀开任何组织的引擎盖,你很可能会看到不同团队、平台和应用在工具与信息质量上参差不齐。对AI智能体而言,可观测性更加重要,它帮助诊断决策质量、性能和成本。组织需要制定可观测性要求,让智能体被一致地追踪。OpenTelemetry正在制定一项标准,我预计会有多个AI智能体编排平台跟进实现。
Splunk产品管理高级总监Morgan McLean表示:“通常做可观测性时,你关心的是捕获延迟、响应信息请求、处理错误,也许还有监控成本;但面对智能体或任何生成式AI,捕获响应的实际质量才是关键。你不仅想看到一次服务调用性能正常,还想确认它的行为确实符合预期。”
要诊断智能体行为问题,平台必须捕获思考步骤、对外部资源的连接、考虑过的决策、做出的处置以及采取的行动。
Liferaft首席信息安全官Michael Castro说:“大多数团队只记录智能体的最终答案,然后就认为完事了;你真正需要的是包含每一次交接的决策轨迹。只有这样,面对500个智能体时的事故复盘才不会变成猜谜。”
Grafana Labs AI高级总监Mat Ryer补充说:“当多智能体链失败时,团队需要看到是哪个工具调用、哪份检索到的数据或哪次交接引入了错误。有了这种可见性,编排层就能抓住卡住或陷入循环的智能体,交给工程师的是一个假设,而不是一堆原始遥测数据,这正是团队只试一次和放心让它无人值守运行的框架之间的真正差别。”
建议:IT运维、DevOps和站点可靠性工程师曾是强可观测性实现的主要受益者。有了AI智能体,风险管理、信息安全、法务等其他职能也需要这些信息。当智能体出现质量问题或卷入安全事件时,这些团队都会想查看决策轨迹。
支撑灵活运营
多位专家提出了有助于降低成本、提升性能或支撑智能体决策的能力。一个例子是动态模型选择,让简化任务被分流到更小、更便宜、内部托管的模型上。
NinjaTech AI创始人、CEO兼CPO Babak Pahlavan说:“编排的韧性,就是拒绝把工作流硬绑在某一家的模型上。如果你的平台能把高风险推理任务路由给Claude,把高频、低风险的工作交给开放权重模型,并且能在不重构任何东西的情况下替换其中任何一个,你就对模型下线和定价变化具备了韧性。”
Itential AI战略与创新高级副总裁Karan Munalingal说,一个能行动却不能撤销行动的自主智能体是负债。“韧性编排取决于这样的能力:发现非预期结果,并自动把基础设施回滚到已知良好状态,而不是等人先发现。这条恢复路径,才是智能体采用从受控试点变成运维团队敢在生产中信任的关键。”
与之相关的能力,是集中化的智能体故障检测与事件处置。Diagrid CEO兼联合创始人Mark Fussell说:“编排智能体的挑战不在于协调工作流,而在于确保这些工作流能从不可避免的失败中自动恢复。智能体的持久执行正在推动企业采用,因为它让智能体能够检测失败并从确切的中断点自动恢复,而不是从头重启。这降低了成本、消除了重复工作,也让长时运行的AI系统韧性强到足以承载关键业务负载。”
建议:AI智能体是非确定性的,因此即便准确性和价值在生产前已被验证,在初期铺开阶段引入人工与自动控制,仍能帮助AI智能体编排平台形成差异化,自动处理非预期行为。
改善上下文层
一些AI编排平台能够监控AI智能体的准确性和模型漂移。平台也可以改善智能体所依赖的上下文层,其中包含企业的知识、语义和业务规则。
Concentrix智能体系统负责人Guy Bourgault表示:“理解过往操作、客户历史和持久业务规则的智能体,会以更强的相关性和连续性作出回应。当这种能力成熟后,客户不必重复步骤或信息,流程变得更高效,决策也会因系统基于已知信息行动而改善。”
Kamiwaza AI联合创始人兼CTO Matt Wallace说,提升模型在长周期、复杂任务中的连贯性,很大程度上其实是系统工程问题。“定义约束与执行、目标与架构、测试与验证。这是‘AI能不能做’已经过时的时代,该问的是‘我怎么确定AI做了、而且做对了’。”
最后,一些平台帮助统一人与AI的协作方式。这些可以包括:由人工在环路中,在行动前审查决策;AI智能体推荐行动、由人协作决定做什么的人工增强工作流;以及当AI智能体需要纠偏或需要撤出运营职责时的人工覆盖与急停开关。
Kosmos CEO兼创始人Sanjay Gidwani说,在智能体发现问题与它采取下一步行动之间,应当有一次人工检查。“智能体摆出它的发现和证据,人来审阅并给出是或否,只有‘是’才让智能体继续前进。这一步做到三件事:第一,阻止一个错误答案在无人察觉时扩散到四个系统;第二,让链条上的下一个智能体拿到的是人已经批准的东西;第三,留下谁同意了什么的记录,而这正是智能体出错时所有人首先会问的东西。”
建议:当组织投入知识管理以提升上下文层的信息质量时,AI智能体将变得更聪明、决策更好。此外,应寻找那些在AI智能体、人的验证与上下文层之间实现反馈回路的AI编排平台。在智能体拥有可查的历史表现、并获得智能体所有者和领域专家信任之前,许多组织会布置人在环路中以及其他形式的人机协作。
随着组织把更多AI智能体投入生产,领导者会意识到需要编排、治理、控制、可观测性和度量的支撑。AI编排平台提供了一条通往韧性运营的路径。






京公网安备:11010502051901号