应对智能体安全挑战 蚂蚁集团“蚁天鉴”升级
创始人
2025-07-29 03:20:48

来源:上海证券报·中国证券网

上证报中国证券网讯(记者 宋薇萍)7月28日,2025世界人工智能大会(WAIC 2025)期间,在由中国信息通信研究院举办的“大模型智塑全球产业新秩序论坛”上,蚂蚁集团大模型安全解决方案“蚁天鉴”宣布升级,新增智能体(AI Agent)安全评测工具,具备Agent对齐、mcp安全扫描、智能体安全扫描及零信任防御等四大核心功能。

随着人工智能(AI)技术的不断进步,AI领域正从大模型时代迈向智能体时代。智能体不仅具备对话生成能力,还拥有自主规划、跨领域推理,甚至能做出超越人类理解的决策,AI已进入“行动”阶段。

然而,智能体的越权、过度代理等问题也带来了安全挑战。数据显示,超过70%的智能体从业者担忧AI幻觉与错误决策、数据泄露等问题,因为AI生成的内容往往包含事实错误,或者对指令产生误解,其中超半数受访者表示,所在企业尚未设立明确的智能体安全负责人。

蚂蚁集团表示,“蚁天鉴”为蚂蚁集团联合清华大学共同研发推出的大模型安全一体化解决方案,确保大模型技术在安全可靠的环境中发挥效能,打造AI大模型的安全铠甲。升级的“蚁天鉴”在Agent运行阶段,构建了一套智能安全扫描系统,通过一系列专用工具来检测Agent可能面临的安全风险,实现端到端扫描,确保工具与 Agent的交互链路不被篡改或绕过,为复杂环境下的稳定运行提供可验证的安全基线。目前,“蚁天鉴”的风险研判Agent准确率可以达到96%以上,并可支持11个行业的智能体测试。

蚂蚁集团机器智能部总经理、安全实验室首席科学家王维强表示:“升级的‘蚁天鉴’基于‘以攻促防’的安全理念,通过构建‘对齐-扫描-防御’技术栈,形成全流程防护体系,从而为智能体提供风险扫描与实时防御能力,我们也将与行业共建,未来逐步开源开放安全工具。”

据了解,2024世界人工智能大会上,“蚁天鉴”2.0发布,形成了包括大模型基础设施测评、大模型X光测评、应用安全测评、AIGC滥用检测、证件伪造检测、围栏防御等在内的完整技术链条,面向行业提供全方位智能化的大模型安全测评和防御解决方案。

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

英国拟调整银行业务分离规则 据路透社5月18日报道,英国政府今日发布银行业务分离(ring-fencing)规则的拟议改革方案,...
最低月租9.9元!中国电信推出... 中国电信(资料图) 5月17日,中国电信推出系列试商用“Token套餐”,具体包括以下三部分内容: ...
广东省贸促会周部长及企业代表莅... 2026年5月16日下午,广东省贸促会周油松部长、东莞市森亿合智能包装有限公司周邦副总经理、广州同华...
A股震荡,如何布局? 5月18日,A股延续调整态势,超3000只个股收跌,有色金属、大消费、医药等板块领跌;电子、计算机等...
中山大学:构建人工智能人才培养... 近日,教育部等五部门发布《“人工智能+教育”行动计划》,提出推动人工智能人才培养与素养提升、促进人工...
华为申请通信方法和通信装置专利... 国家知识产权局信息显示,华为技术有限公司申请一项名为“通信方法和通信装置”的专利,公开号CN1220...
Odoo免费开源社区版:Odo... 地区:中国广东省东莞市 行业:电脑配件制造 已应用模块:销售、财务、库存,以及淘宝、京东、多公司...
3D硬金凭什么比黄金贵?看完终... 在黄金消费市场,你可能会发现一个有趣的现象:同样是黄金饰品,3D硬金的价格往往比传统黄金高出不少。这...
惠誉将万科信贷评级降至RD(限... 观点网讯:5月18日,国际评级机构惠誉宣布,将万科企业股份有限公司长期外币及本币发行人主体评级由“C...
超越保时捷卡宴Turbo GT... GT和Ultra有什么不一样? 明明是一辆SUV,小米YU7 GT有必要跑纽北吗? 今日,雷军发布...