news 2026/4/16 20:47:54

Agentic AI可靠性工程实践,确定性工具与探索性Agent的平衡

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
Agentic AI可靠性工程实践,确定性工具与探索性Agent的平衡

Erickson认为,当我们将代理式AI视为真实运营系统之上的一个抽象层,而不是完全替代这些系统时,它才会变得真正有价值。模型可以理解问题、检索证据、分类情况并提出行动建议,而确定性系统则负责执行操作、强制执行约束,并提供使整个循环能够被评估的遥测数据。

在2025年QCon AI纽约大会上,Aaron Erickson提出了一个颠覆性的观点:代理式AI(Agentic AI)本质上是一个工程问题,而非提示词技巧的练习。

他的核心观点是,系统的可靠性来自于将 概率性组件 与 确定性边界 相结合。

代理式AI作为系统层,而非替代品

Erickson认为,当我们将代理式AI视为真实运营系统之上的一个抽象层,而不是完全替代这些系统时,它才会变得真正有价值。

模型可以理解问题、检索证据、分类情况并提出行动建议,而确定性系统则负责执行操作、强制执行约束,并提供使整个循环能够被评估的遥测数据。

自然语言到SQL的常见陷阱

Erickson描述了一个在自然语言转SQL以及类似查询生成模式中的常见陷阱。

最初的几个演示之所以能够成功,是因为问题简单且数据库模式较小。但当模式变得复杂,查询空间包含大量连接、边缘情况或重载字段时,准确性会急剧下降。

他强调的一个缓解策略是减少自由度:扁平化模式、约束查询形式,并将表达能力视为必须通过更多评估和额外保障措施来支付的成本。

分类与代码生成的关键差异

Erickson还观察到了分类任务和代码生成之间的实用差异。

当系统的任务是从一小组已知类别中进行选择时,模型可以非常有效。但当系统的任务是在一个巨大的搜索空间中发明任意程序时,错误率会攀升。

这个差距成为了一个设计杠杆:你可以让模型先对意图进行分类,然后路由到确定性查询模板或有界工具调用。

工具选择本身就是可靠性问题

Erickson展示了一张包含大量芝士蛋糕菜单的幻灯片,用以说明工具选择本身就是一个可靠性问题。

"大语言模型可能遭受'选择悖论'"

当太多工具看起来相似时,选择质量会下降,模型可能会自信地选择一个次优或不安全的路径。

工程上的启示是,工具目录和工具接口是产品的一部分。

工具应该具有差异化、描述清晰且受到约束,否则Agent会表现得像一个盯着巨大菜单的用户,Erickson说道。

角色专业化的重要性

Erickson随后阐述了为什么角色专业化很重要。

一个"对一切都略知一二"的通用Agent可能在路由和摘要方面很有帮助,但系统的正确性取决于为特定任务构建的、具有狭窄契约的专用组件。

他描述了一个类似管理层的委托层,但将其视为编排层,而不是领域逻辑应该存在的地方。在他看来,重要的工作在于实际接触底层系统的专用Agent和确定性工具。

Agent行为分类体系

这引出了他对Agent行为的分类体系。

最具体的例子之一是"Worker Agent"幻灯片,展示了一个人在石头上画螺旋,配以提示词来检查大量集群并标记值得关注的集群。

他认为Agent可以部署在数千条相似记录上,重复执行相同的分析,并存储结构化输出以供后续审查。

他描述了随着系统增长而帮助控制复杂性的其他角色:

工具选择Agent:当有多种方式实现结果时,可以帮助减少歧义

观察者或咨询式Agent:可以监控组件之间的交互,标记不安全的通信模式、策略违规或质量回归

导演Agent:可以在其他Agent之间委托工作,并跟踪朝着可衡量结果的进展

这个信息反映了经典的测试指导原则:尽可能将信心推入测试中,并保留完整系统运行以验证集成行为。

确定性锚点的必要性

Erickson还使用了一个简单的运营类比来证明确定性锚点的必要性。

他问:你是否每次都重新发明常规操作?

答案是:你不会。你会为操作员提供确定性的运行手册。

他认为代理式系统应该继承这个习惯。在可重复性重要的地方,将可重复性编码到工具和运行手册中,让Agent决定何时应用运行手册,而不是允许Agent为每个事件发明新流程。

确定性与发现之间的平衡

最后,Erickson回到了确定性和发现之间的分割。发现是Agent探索、提出和发现异常的地方。

确定性是确定性工具执行有界操作并执行策略的地方。

他认为,两者之间的边界就是平台工程所在之处:身份验证、授权、审计、遥测和安全降级。

如果你想更深入地学习大模型,以下是一些非常有价值的学习资源,这些资源将帮助你从不同角度学习大模型,提升你的实践能力。

一、全套AGI大模型学习路线

AI大模型时代的学习之旅:从基础到前沿,掌握人工智能的核心技能!​

因篇幅有限,仅展示部分资料,需要点击文章最下方名片即可前往获取

二、640套AI大模型报告合集

这套包含640份报告的合集,涵盖了AI大模型的理论研究、技术实现、行业应用等多个方面。无论您是科研人员、工程师,还是对AI大模型感兴趣的爱好者,这套报告合集都将为您提供宝贵的信息和启示

因篇幅有限,仅展示部分资料,需要点击文章最下方名片即可前往获取

三、AI大模型经典PDF籍

随着人工智能技术的飞速发展,AI大模型已经成为了当今科技领域的一大热点。这些大型预训练模型,如GPT-3、BERT、XLNet等,以其强大的语言理解和生成能力,正在改变我们对人工智能的认识。 那以下这些PDF籍就是非常不错的学习资源。

因篇幅有限,仅展示部分资料,需要点击文章最下方名片即可前往获取

四、AI大模型商业化落地方案

作为普通人,入局大模型时代需要持续学习和实践,不断提高自己的技能和认知水平,同时也需要有责任感和伦理意识,为人工智能的健康发展贡献力量。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/12 6:35:01

H3C双WAN口策略路由配置技术教程

一、概述1.1 核心作用H3C双WAN口策略路由通过精细化的流量引导规则,实现不同业务流量在两个WAN口(如电信、联通两条宽带)间的精准分流与冗余备份。核心价值包括:提升网络带宽利用率,避免单WAN口过载;保障核…

作者头像 李华
网站建设 2026/4/12 13:42:05

收藏!不懂AI的测试工程师,正在成为最先“被优化“的那一批人?

身边有个做测试的朋友老周,深耕行业7年,至今仍停留在基础功能测试岗位。最近跟我聊天时,他的焦虑都快溢出来了:“三十好几了,加班熬不过刚毕业的年轻人,技能还没跟上迭代节奏。现在打开招聘软件&#xff0c…

作者头像 李华
网站建设 2026/4/15 3:46:36

KAT-Dev-72B-Exp开源:74.6%准确率的AI编程神器

KAT-Dev-72B-Exp开源:74.6%准确率的AI编程神器 【免费下载链接】KAT-Dev-72B-Exp 项目地址: https://ai.gitcode.com/hf_mirrors/Kwaipilot/KAT-Dev-72B-Exp KAT-Dev-72B-Exp作为一款拥有720亿参数的开源软件工程模型,在SWE-Bench Verified评测中…

作者头像 李华
网站建设 2026/4/15 8:11:05

Qwen3-VL重磅发布:2350亿参数视觉大模型来了!

Qwen3-VL重磅发布:2350亿参数视觉大模型来了! 【免费下载链接】Qwen3-VL-235B-A22B-Instruct-FP8 项目地址: https://ai.gitcode.com/hf_mirrors/Qwen/Qwen3-VL-235B-A22B-Instruct-FP8 导语:Qwen3-VL-235B-A22B-Instruct-FP8视觉大模…

作者头像 李华
网站建设 2026/4/15 11:07:35

爬蟲資料總是不對?可能是你的類型註解沒寫對

爬蟲資料總是不對?可能是你的類型註解沒寫對引言:為什麼我的爬蟲總是出錯?「昨天還能正常運行的爬蟲,今天突然就解析失敗了!」 「明明網頁結構沒有變化,為什麼抓到的數據總是亂碼?」 「這個 API…

作者头像 李华