news 2026/6/15 14:43:29

IBM推出开源智能体CUGA 任务完成率超五成

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
IBM推出开源智能体CUGA 任务完成率超五成

IBM研究人员发布了一款名为CUGA的开源智能体,旨在实现复杂企业工作流程的自动化,根据不同任务类型,其准确完成率约为50%。

CUGA是"可配置通用智能体"的缩写。根据其在AI平台HuggingFace上的介绍,该软件通过"多智能体编排、API集成以及在企业演示应用中的代码生成,实现智能任务自动化"。

IBM研究团队在今年7月发布的论文中写道:"我们对IBM CUGA的愿景是开发一个通用智能体,知识工作者可以对其进行调整和配置,以安全可靠的方式执行工作中的日常或复杂任务。"

然而,并非所有人都认为智能体是安全可靠的。IT咨询公司Gartner最近建议屏蔽所有智能体浏览器,此前几个月该公司还警告称,约40%的企业智能体项目将因缺乏商业价值而在2027年前被取消。

尽管如此,自动化的诱惑力依然强劲,IBM也热衷于提供帮助。蓝色巨人的研究人员引用了CUGA在WebArena和AppWorld基准测试中的表现——分别实现了61.7%的网页任务完成成功率和48.2%的API任务场景完成率——并指出该智能体的得分虽然对于人类员工来说可能导致被解雇,但目前代表了智能体领域的顶级水平。

值得注意的是,IBM似乎没有使用自家面向企业的WebAgentBench基准来评估CUGA。公司研究人员关于这一自主开发测试套件的论文描述了三个智能体——AgentWorkflowMemory(AWM)、WorkArena-Legacy和WebVoyager——在完成指定任务方面的评估结果。

这些智能体的平均原始完成率仅为24.4%,符合政策要求的完成率仅为15%。当存在五个或更多政策时,符合政策的平均完成率仅为7.1%。而企业通常有超过五个适用于业务工作流程的政策。

基准测试论文指出:"企业工作流程通常包含数十个并发政策,这表明现实世界的不足将更加明显,政策稳健优化,而不仅仅是原始完成率,必须成为关注的核心目标。"

在CUGA获得61.7%成功率的WebArena基准测试中,AWM仅获得35.5%的成功率。

IBM科学家今年早些时候指出了各种AI基准测试的不足之处,但至少CUGA的得分表明智能体正在改进。

CUGA采用Apache 2.0许可证发布,从聊天层开始,该层设计用于从提示中辨别用户意图。这可能是"从数字销售中获取收入最高的账户,然后将其添加到当前页面",或者是HuggingFace演示中包含的任何其他示例提示,该演示模拟了一个小型CRM系统,配备了20个预配置工具用于进行销售相关查询和API调用。

作者解释说,任务规划和控制组件分析输入到CUGA中的提示,并将目标分解为在任务账簿中跟踪的结构化子任务集。该账簿是动态的,当第一次尝试不成功时可以重新规划。

研究人员在博客文章中解释说:"子任务被委派给专门的智能体,如API智能体,它使用内部推理循环在安全沙箱中调用代码之前生成伪代码指令。系统利用超越MCP协议的工具注册表来解析和理解工具能力,实现精确编排。"

最后,系统向用户返回希望符合政策要求的响应。

IBM开发团队设计CUGA与Langflow协作,Langflow是一个用于智能体设计的低代码平台,并支持各种开放模型,如gpt-oss-120b和Llama-4-Maverick-17B-128E-Instruct-fp8。巧合的是,据报道,Llama的制造商Meta正在开发一个名为Avocado的后续模型,该模型可能不会开源。

CUGA似乎仍有一些粗糙的地方。例如,最近报告的一个错误表明,该智能体偶尔可能在退出运行循环时遇到问题。但如果您正在部署AI智能体软件并期望毫不费力地自动化多步骤业务任务,您可能需要降低期望值。

Q&A

Q1:CUGA智能体的任务完成率如何?

A:CUGA在不同基准测试中表现不同:在WebArena基准测试中实现61.7%的网页任务成功率,在AppWorld基准测试中达到48.2%的API任务场景完成率。虽然这些数字对人类员工来说可能不够理想,但在当前智能体领域已属顶级水平。

Q2:企业智能体在实际应用中面临什么挑战?

A:企业智能体面临的主要挑战是政策合规问题。研究显示,当企业存在五个或更多政策时,智能体符合政策要求的平均完成率仅为7.1%。而实际企业工作流程通常包含数十个并发政策,这使得现实应用中的挑战更加严峻。

Q3:CUGA智能体如何工作?

A:CUGA采用多层架构:首先通过聊天层识别用户意图,然后任务规划组件将目标分解为结构化子任务并记录在动态任务账簿中。子任务被委派给专门智能体处理,如API智能体会在安全沙箱中生成和执行代码,最终返回符合政策要求的响应。


版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/15 11:20:41

Java毕设项目推荐-基于javaweb的宠物托管系统基于Spring Boot的宠物托管服务系统服务预约、监控宠物状况、与服务提供者沟通【附源码+文档,调试定制服务】

博主介绍:✌️码农一枚 ,专注于大学生项目实战开发、讲解和毕业🚢文撰写修改等。全栈领域优质创作者,博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围:&am…

作者头像 李华
网站建设 2026/6/15 12:21:07

停止将AI拟人化:这样做的危害性分析

在让AI模型显得越来越令人印象深刻的竞赛中,科技公司采用了戏剧化的语言表达方式。他们不断地像谈论人类一样谈论AI。不仅讨论AI的"思考"或"规划"——这些词语本身就充满争议——现在他们还讨论AI模型的"灵魂",以及模型如…

作者头像 李华
网站建设 2026/6/15 12:24:18

对称二叉树(tree_c)(信息学奥赛一本通- P1368)

【题目描述】如果二叉树的左右子树的结构是对称的,即两棵子树皆为空,或者皆不空,则称该二叉树是对称的。编程判断给定的二叉树是否对称.例:如下图中的二叉树T1是对称的,T2是不对称的。二叉树用顺序结构给出&#xff0c…

作者头像 李华
网站建设 2026/6/15 0:01:28

特价股票投资中的另类数据应用

特价股票投资中的另类数据应用关键词:特价股票投资、另类数据、数据挖掘、投资策略、金融科技摘要:本文深入探讨了在特价股票投资领域中另类数据的应用。首先介绍了研究的背景、目的、预期读者等信息,详细阐述了另类数据和特价股票投资的核心…

作者头像 李华
网站建设 2026/6/14 19:38:20

程序员收藏!AI大模型赋能制造业:4类核心模型+10+应用案例解析

AI大模型通过直接赋能、场景化定制和任务化定制三种方式推动制造业数字化转型。文章分析了大模型的适用边界和核心能力,介绍语言、专用、多模态和视觉四类模型在工业各环节的应用案例。尽管大模型并非万能,但其与专业知识结合能最大化AI潜力,…

作者头像 李华
网站建设 2026/6/15 12:20:32

别再让 JavaScript 抢 CSS 的活儿了,css原生虚拟化来了

React 虚拟化的过度使用React 开发者似乎把虚拟化库(比如 react-window 和 react-virtualized)当成了渲染列表的万能药。从逻辑上看,这似乎很合理:用户一次只能看到 10 个项目,为什么要渲染全部 1000 个?虚…

作者头像 李华