应对智能体安全挑战 蚂蚁集团“蚁天鉴”升级
创始人
2025-07-29 03:20:48

来源:上海证券报·中国证券网

上证报中国证券网讯(记者 宋薇萍)7月28日,2025世界人工智能大会(WAIC 2025)期间,在由中国信息通信研究院举办的“大模型智塑全球产业新秩序论坛”上,蚂蚁集团大模型安全解决方案“蚁天鉴”宣布升级,新增智能体(AI Agent)安全评测工具,具备Agent对齐、mcp安全扫描、智能体安全扫描及零信任防御等四大核心功能。

随着人工智能(AI)技术的不断进步,AI领域正从大模型时代迈向智能体时代。智能体不仅具备对话生成能力,还拥有自主规划、跨领域推理,甚至能做出超越人类理解的决策,AI已进入“行动”阶段。

然而,智能体的越权、过度代理等问题也带来了安全挑战。数据显示,超过70%的智能体从业者担忧AI幻觉与错误决策、数据泄露等问题,因为AI生成的内容往往包含事实错误,或者对指令产生误解,其中超半数受访者表示,所在企业尚未设立明确的智能体安全负责人。

蚂蚁集团表示,“蚁天鉴”为蚂蚁集团联合清华大学共同研发推出的大模型安全一体化解决方案,确保大模型技术在安全可靠的环境中发挥效能,打造AI大模型的安全铠甲。升级的“蚁天鉴”在Agent运行阶段,构建了一套智能安全扫描系统,通过一系列专用工具来检测Agent可能面临的安全风险,实现端到端扫描,确保工具与 Agent的交互链路不被篡改或绕过,为复杂环境下的稳定运行提供可验证的安全基线。目前,“蚁天鉴”的风险研判Agent准确率可以达到96%以上,并可支持11个行业的智能体测试。

蚂蚁集团机器智能部总经理、安全实验室首席科学家王维强表示:“升级的‘蚁天鉴’基于‘以攻促防’的安全理念,通过构建‘对齐-扫描-防御’技术栈,形成全流程防护体系,从而为智能体提供风险扫描与实时防御能力,我们也将与行业共建,未来逐步开源开放安全工具。”

据了解,2024世界人工智能大会上,“蚁天鉴”2.0发布,形成了包括大模型基础设施测评、大模型X光测评、应用安全测评、AIGC滥用检测、证件伪造检测、围栏防御等在内的完整技术链条,面向行业提供全方位智能化的大模型安全测评和防御解决方案。

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

杭州高能云投顾是正规公司吗?缴... 股市有风险,入市需谨慎,这句话从懂事起就萦绕耳边,七亏二平一赚,也是股市永恒不变的真理,换句话说,炒...
厦门文达嘉译信息科技有限公司旅... 本文旨在进行投资风险教育,不针对任何特定企业。以下案例为拟情景,如有雷同纯属巧合。某国企背书的旅游项...
萝卜订购app被坑了输了钱怎么... 萝卜订购app被坑了输了钱怎么办?退费有方法输了很多钱有人成功追回了!不成功不收费退款流程!目前,从...
中译云(四川)文化旅游发展有限... 本文旨在进行投资风险教育,不针对任何特定企业。以下案例为拟情景,如有雷同纯属巧合。某国企背书的旅游项...
神光投顾1280元?被忽悠交费... 神光投顾1280元?被忽悠交费26800荐股亏钱维权可退!北京和众汇富服务费是可以退的。如果认为中富...
失败13年后,谷歌又计划重返战... Google Glass,被广泛认为是智能眼镜领域的开创者。 2012年6月28日,在谷歌I/O开发...
厦门风行时越传媒有限公司旅游投... 本文旨在进行投资风险教育,不针对任何特定企业。以下案例为拟情景,如有雷同纯属巧合。某国企背书的旅游项...
聚流与引力场:人才流动新图景 一、从“流失”到“聚流”:人才流动的范式转移 二十世纪下半叶,“人才流失”成为发展中国家头顶的悬剑。...
万隆证券3800是正规的吗投顾... 股民朋友给投顾公司缴纳了投顾服务费后,会安排所谓的老师指导推荐股票,但是终股民朋友亏损的状况并不能得...
中国国旅保定国际旅行社有限公司... 本文旨在进行投资风险教育,不针对任何特定企业。以下案例为拟情景,如有雷同纯属巧合。某国企背书的旅游项...