谷歌发布Agentic Vision:模仿人类处理图像,让AI学会“放大看”
创始人
2026-01-28 15:41:09

IT之家 1 月 28 日消息,谷歌 DeepMind 团队昨日(1 月 27 日)发布博文,宣布在 Gemini 3 Flash 模型基础上,推出“智能体视觉”(Agentic Vision)功能。

IT之家援引博文介绍,传统 AI 模型在处理图像时,通常仅进行一次静态扫描,这种方式若遗漏了芯片序列号或远处的路牌等细微细节,模型便只能依靠猜测来生成答案。

Gemini 3 Flash 引入的“智能体视觉”打破了这一局限,将视觉理解转化为一个主动调查的过程。模型不再被动接收信息,而是通过结合视觉推理与代码执行,模仿人类“思考、行动、观察”循环处理图像,从而确立答案的视觉证据。

“智能体视觉”功能的核心,在于形成“思考-行动-观察”闭环:

  • 首先是“思考”阶段,模型分析用户查询和初始图像,制定多步计划;
  • 紧接着进入“行动”阶段,模型生成并执行 Python 代码来主动操作图像(如裁剪、旋转、标注)或进行分析(如计算边界框);
  • 最后是“观察”阶段,变换后的图像被追加到模型的上下文窗口中。

这一机制让 Gemini 3 Flash 能够利用更新后的数据和更佳的语境进行二次检查,从而生成基于事实的最终回复。

引入代码执行能力后,Gemini 3 Flash 在多数视觉基准测试中质量提升了 5-10%。以建筑图纸验证平台 PlanCheckSolver.com为例,该平台利用此功能让模型通过代码裁剪并分析屋顶边缘等高分辨率细节,使准确率提高了 5%。

此外,在处理视觉数学问题时,模型不再依赖概率猜测,而是通过编写代码识别原始数据并调用 Matplotlib 库绘制精确图表,有效解决了大型语言模型在多步视觉算术中常见的“幻觉”问题。

Google DeepMind 表示这仅仅是开始。目前的 Gemini 3 Flash 已擅长隐式决定何时放大细节,未来版本将无需用户显式提示即可自动执行旋转图像或视觉运算等操作。

⚠️
本网站信息内容及素材来源于网络采集或用户发布,如涉及侵权,请及时联系我们,发送链接至2697952338@QQ.COM,我们将第一时间进行核实与删除处理。

相关内容

热门资讯

全球保险经纪四巨头之一:亚瑟加... 一、公司概况亚瑟加拉格尔有限公司(Arthur J. Gallagher & Co.,NYSE股票代...
全球最大LNG出口商:钱尼尔能... 一、公司概况钱尼尔能源(Cheniere Energy, Inc.,股票代码:LNG)是美国乃至全球...
加拿大皇家银行(RBC):北美... 一、公司概况加拿大皇家银行(Royal Bank of Canada,简称RBC,TSX: RY,N...
全球半导体测试设备龙头Tera... 一、公司概况Teradyne, Inc.(NASDAQ代码:TER,中文名:泰瑞达)成立于1960年...
大众汽车集团2024财报:转型... 一、公司概况大众汽车集团(Volkswagen AG)成立于1937年,总部位于德国沃尔夫斯堡(Wo...
拉斯维加斯金沙集团:全球综合度... 公司概况拉斯维加斯金沙集团(Las Vegas Sands Corp.)成立于1988年,总部位于美...
吉利德科学:抗病毒药物巨头,创... 公司概况吉利德科学公司(Gilead Sciences, Inc.)成立于1987年,总部位于美国加...
高通公司:全球无线通信技术龙头... 公司概况高通公司(Qualcomm Incorporated)成立于1985年,总部位于美国加利福尼...
Databricks:湖仓一体... 一、公司概况Databricks 成立于2013年,总部位于美国加利福尼亚州旧金山,是一家专注于云端...
HubSpot深度解析:全球C... 一、公司概况HubSpot, Inc.(股票代码:HUBS)成立于2006年,总部位于美国马萨诸塞州...