网易首页 > 网易号 > 正文 申请入驻

视频分析成本砍66%,谷歌新功能让AI学会“挑着看”

0
分享至

谷歌今天给开发者送了个大礼包。在最新的 Gemini 3.7 Flash、3.6 Flash 和 3.5 Flash-Lite 模型中,一项名为“智能体视频理解”的新功能正式上线。它的核心卖点很直接:让 AI 看视频时不再“傻看”,而是学会“挑着看”——结果就是分析成本最高降 66%,Token 消耗最高降 88%,准确率还能提升最高 7%。

这组数字放在长视频场景里尤其诱人。过去开发者处理几小时的视频素材,往往要在“烧掉海量 Token”和“漏掉关键细节”之间做痛苦取舍。现在,谷歌给出的方案是让模型自己决定该看什么、看多快、用哪种方式看。


从“逐帧扫”到“按需看”

传统静态处理方式很简单粗暴:模型按固定帧率读取视频,默认每秒 1 帧,开发者可以通过 API 调整。这种方式的问题在于,不管视频里有没有重要内容,模型都得从头到尾“扫”一遍,Token 消耗自然居高不下。

智能体视频理解则完全不同。它把模型的核心推理能力与原生视频工具结合起来,让 Gemini 能在视觉帧、音频和转录文本中动态搜索、扫描和检查目标片段。换句话说,模型不再被动接收所有画面,而是主动、有目标地决定:哪些内容值得看、以什么速度看、通过哪种模态获取信息——帧、音频还是转录文本。

这种“按需取用”的逻辑,只提取所需的片段和信号。以前这些精细操作全靠开发者手动完成,现在 Gemini 通过智能循环自动搞定,开发工作量大幅缩减。

四个新能力,专治长视频痛点

谷歌为这项功能总结了四个典型应用场景,每一个都直指长视频处理的传统痛点:

  • 亚秒级时刻检索:精准定位在 1 FPS 下容易错过的瞬间状态变化和紧凑剪辑边界,高精度自动化视频编辑成为可能。
  • 长视频“大海捞针”搜索:在长达数小时的视频中回答复杂查询,无需消耗数百万 Token。
  • 异常检测:对感兴趣的时间窗口以更高帧率重新采样,快速捕捉快速运动和细微视觉伪影。
  • 动作与物体计数:随时间精准追踪重复的物理动作和不同物体。

谷歌特别提到,Gemini 3.7 Flash 搭配智能体视频理解能实现最佳整体质量,在质量与成本效率间达到最优平衡,处于视频理解任务中准确率与成本的帕累托最优前沿。

上线即用,价格不额外加收

对开发者来说,最友好的部分在于接入成本。该功能使用标准 Gemini API Token 定价,不收取额外功能费用。目前已在 Google AI Studio 和 Gemini Enterprise Agent Platform 的 Gemini API 中上线,支持视频上传和 YouTube 视频分析。开发者只需在 API 配置中将处理模式设置为“agentic”即可启用。

谷歌的野心不止于开发者。这项能力很快会推向更多面向普通用户的产品:Gemini 应用中所有 Flash 和 Flash-Lite 模型用户即将获得该功能;未来几个月内,它还将为 YouTube 视频观看页的“Ask YouTube”功能提供支持,借助 Gemini 给出基于视频画面的更高质量回答。

从“静态扫帧”到“智能体式检索”,谷歌这次把视频理解的效率天花板又抬高了一截。对于每天和长视频数据打交道的团队来说,这可能是近期最值得试一次的新工具。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
民众呼吁“取消养老特权”!71岁专家引发争议,养老差距真相大白

民众呼吁“取消养老特权”!71岁专家引发争议,养老差距真相大白

百科密码
2026-08-31 10:02:15
王鸥也没想到,自己宣布女儿身份仅1天,德云社竟招来全网声讨

王鸥也没想到,自己宣布女儿身份仅1天,德云社竟招来全网声讨

白面书誏
2026-09-01 13:54:39
普京:希望结束战争而非临时冻结,俄方随时准备与任何愿意参与谈判的人进行谈判

普京:希望结束战争而非临时冻结,俄方随时准备与任何愿意参与谈判的人进行谈判

每日经济新闻
2026-09-02 21:47:42
“5亿吨冰层突然崩塌,很可能是永久冻土发生变化所致”,山体滑坡专家:尼泊尔境内发生冰岩崩之前,没有明显的地表异常信号

“5亿吨冰层突然崩塌,很可能是永久冻土发生变化所致”,山体滑坡专家:尼泊尔境内发生冰岩崩之前,没有明显的地表异常信号

都市快报橙柿互动
2026-09-02 00:34:44
北京女子状告开发商,赢下2600万元官司,200万元律师费仅付30万后失联遭律所起诉,代理人:律师费过高

北京女子状告开发商,赢下2600万元官司,200万元律师费仅付30万后失联遭律所起诉,代理人:律师费过高

极目新闻
2026-09-02 09:10:08
吉隆口岸联检大楼原址插上了五星红旗,核心受灾区现场最新航拍:“失联人员和车辆深埋巨石和淤泥之下”

吉隆口岸联检大楼原址插上了五星红旗,核心受灾区现场最新航拍:“失联人员和车辆深埋巨石和淤泥之下”

大风新闻
2026-09-02 15:57:28
碧桂园出事比恒大问题更大,看许家印落狱,杨氏父女疯找活路

碧桂园出事比恒大问题更大,看许家印落狱,杨氏父女疯找活路

赶鸭子上架
2026-09-02 12:37:08
房价很大可能再走2015年老路?大家要有心理准备

房价很大可能再走2015年老路?大家要有心理准备

阿离家居
2026-09-03 00:09:41
“车灯女王”终于低头!星宇股份董事长周晓萍公开致歉

“车灯女王”终于低头!星宇股份董事长周晓萍公开致歉

听心堂
2026-09-02 12:23:22
“是个“狠人”!27岁小伙用筋膜枪震腰近半小时排出结石,医生:但他的肾脏破裂了

“是个“狠人”!27岁小伙用筋膜枪震腰近半小时排出结石,医生:但他的肾脏破裂了

小强热线
2026-09-02 20:59:25
体坛大乱!国羽高层被一锅端,刘国梁被带走?唯独蔡振华全身而退

体坛大乱!国羽高层被一锅端,刘国梁被带走?唯独蔡振华全身而退

林子说事
2026-09-02 12:21:47
百亿资金灰飞烟灭!把公司108个美女当作后宫,丁宁到底有多狠?

百亿资金灰飞烟灭!把公司108个美女当作后宫,丁宁到底有多狠?

潋滟晴方DAY
2026-09-02 15:24:52
孙宇晨聊天记录曝光,瓜越扒越多!

孙宇晨聊天记录曝光,瓜越扒越多!

互联网品牌官
2026-09-02 15:41:41
官宣!曼城1.25亿镑签下25岁恩佐:夏窗标王诞生 球员感谢切尔西

官宣!曼城1.25亿镑签下25岁恩佐:夏窗标王诞生 球员感谢切尔西

风过乡
2026-09-02 06:43:53
巨亏近100亿,高瓴割肉跑了

巨亏近100亿,高瓴割肉跑了

投资家
2026-09-01 20:45:25
外媒:看完中国战斗机,埃及要增购24架“阵风”战斗机,为什么没买中国战斗机?

外媒:看完中国战斗机,埃及要增购24架“阵风”战斗机,为什么没买中国战斗机?

蓝星杂谈
2026-09-02 09:38:10
星宇股份再爆料:400人HR群发"封杀令",对海外工厂同胞区别用工

星宇股份再爆料:400人HR群发"封杀令",对海外工厂同胞区别用工

天天热点见闻
2026-09-02 09:11:28
乌克兰安全局与乌国防部情报总局在基辅发生交火,乌官员回应:需要彻查

乌克兰安全局与乌国防部情报总局在基辅发生交火,乌官员回应:需要彻查

环球网资讯
2026-09-02 22:09:06
停球被断致丢球!22岁国足红星遭羞辱:替补25分钟被换下 直接离场

停球被断致丢球!22岁国足红星遭羞辱:替补25分钟被换下 直接离场

我爱英超
2026-09-02 22:19:35
尼泊尔“喜马拉雅门户”:全村90%房屋被埋、逾八成居民失联

尼泊尔“喜马拉雅门户”:全村90%房屋被埋、逾八成居民失联

红星新闻
2026-09-02 17:03:06
2026-09-03 02:19:00
我是一个粉刷匠2
我是一个粉刷匠2
有态度网友ytd
211文章数 165关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

游客拍下疑冰崩画面:土石翻涌 山间有黑色物体涌出

头条要闻

游客拍下疑冰崩画面:土石翻涌 山间有黑色物体涌出

体育要闻

一次有奖问答,让他成为欧冠主帅

娱乐要闻

香港武打影星陈观泰离世,终年80岁

财经要闻

星宇股份的麻烦,才刚开始

汽车要闻

配双腔空悬+机械差速锁 传祺越7预售权益价17.18万起

态度原创

时尚
教育
亲子
家居
军事航空

白衬衫不火了?早秋穿“棕色衬衫”更高级好看

教育要闻

南京市“七校联合体”工作研讨暨盟主校交接会顺利召开

亲子要闻

别再炫耀你家孩子不吃零食了!看看评论区那些“报复性”的成年人

家居要闻

2026建博会(广州) 公装联探展交流活动

军事要闻

特朗普威胁伊朗终极打击蓄势待发

无障碍浏览 进入关怀版