网易首页 > 网易号 > 正文 申请入驻

视频分析成本砍88%,Gemini新功能让AI自己找重点

0
分享至

一段90分钟的讲座视频,过去AI分析要烧掉大量算力,现在成本能砍掉近九成。Google DeepMind在2026年9月1日发布了Gemini的「Agentic Video Understanding」功能,让AI不再傻乎乎地把整段视频从头到尾读一遍,而是像人一样,先听问题,再带着目的去视频里找答案。

这个功能目前已经在Gemini 3.7 Flash、Gemini 3.6 Flash和Gemini 3.5 Flash-Lite上开放使用。核心变化在于,AI从「被动接收」变成了「主动侦查」——它会根据你的提问,自己决定该看视频的哪一段、该用多高的清晰度去看。


传统方式为什么又贵又笨?


过去Gemini处理视频用的是「静态处理」:不管视频多长,统一按每秒1帧的速率抽帧,然后把所有画面和音频一股脑塞给模型。这个方法对付短视频还行,但遇到几十分钟甚至几小时的素材就麻烦了——要么消耗大量token,要么为了省成本降低帧率,结果把一闪而过的关键画面漏掉了。

Agentic Video Understanding的思路完全不同。它让Gemini先理解问题,再反过来决定「我需要看视频的哪个部分」。如果某个区间的信息不够,它还能主动调整那个区间的帧率和分辨率,重新看一遍。处理资源不再平均分配,而是集中火力在真正需要的地方。

能干什么?从数拍手到找剪辑点

Google官方举了几个典型场景,每一个都踩在传统方案的痛点上:

  • 数动作次数:比如数一段视频里拍了多少次手。快速动作在1FPS的静态处理下很容易被漏掉或混淆,新功能可以自动提高帧率重新确认。
  • 找剪辑点:定位视频编辑中剪切的位置,这类瞬间变化往往只有几帧。
  • 长视频搜索:在数小时的录像里找某个特定事件,不用从头到尾全看一遍。
  • 异常检测:先低帧率扫一遍,发现异常区间再提高帧率细看。

Google给出的测试数据显示,相比传统静态处理,Agentic Video Understanding能把token消耗最多降低88%,同时精度最高提升约7%。在10分钟的解说视频、90分钟的讲座这类中长视频上,效率改善尤其明显。

成本与精度的「帕累托前沿」

在专门测试长视频理解能力的「1H-VideoQA」基准上,Google对比了单次查询的成本和精度。结果启用Agentic Video Understanding的Gemini 3.7 Flash,在所有被测模型中处于「帕累托前沿」——简单说,就是没有其他模型能在同等成本下做到更高精度,或在同等精度下做到更低成本。整体分析成本最多可削减66%


这个结果并不意外。过去处理长视频,大量token浪费在无关画面上;现在AI只盯着关键区间看,省下的算力自然可观。

怎么用?API指定一下就行

开发者想用这个功能很简单:在Gemini API里把视频处理方式指定为「agentic」即可。目前Google AI Studio和Gemini Enterprise Agent Platform已经支持,上传的视频和公开的YouTube视频都能分析。功能本身不额外收费,只按正常的Gemini API token价格计费。

如果你处理的是5分钟以内的短视频、更看重响应速度,Google也保留了传统的静态处理模式,开发者可以根据场景自行选择。

下一步:进入Gemini应用和YouTube

Google不打算把这个能力锁在API里。官方计划在近期把Agentic Video Understanding带到Gemini应用的Flash和Flash-Lite版本中。另外,几个月内还会集成到YouTube视频观看页面的「Ask YouTube」功能里,让用户直接对着视频提问时,AI能给出更靠谱的回答。

从「AI看视频」到「AI知道该看哪里」,这个转变听起来不大,但对长视频分析的成本结构来说,是一次实打实的改变。对于经常处理会议录像、课程回放、监控素材的团队,这个功能值得第一时间试试。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
3542万印度移民流出,西方多国关上大门,中国恐意外“接盘”?

3542万印度移民流出,西方多国关上大门,中国恐意外“接盘”?

千羽解读
2026-09-03 10:17:05
网友反映西安一景区“海市蜃楼”项目冒烟起火:以为是剧情,但前面游客在尖叫;涉事景区已停业,有人员受伤

网友反映西安一景区“海市蜃楼”项目冒烟起火:以为是剧情,但前面游客在尖叫;涉事景区已停业,有人员受伤

台州交通广播
2026-09-03 06:50:25
被曝要求供应商大幅降价,本田中国回应

被曝要求供应商大幅降价,本田中国回应

第一财经资讯
2026-09-02 19:27:10
哈佛揭秘:毁掉孩子自律的元凶,不是贪玩,是泛滥的廉价多巴胺

哈佛揭秘:毁掉孩子自律的元凶,不是贪玩,是泛滥的廉价多巴胺

户外阿毽
2026-08-27 01:41:54
“清一色的脖子前倾!”一张学生军训照片,让家长心里不是滋味

“清一色的脖子前倾!”一张学生军训照片,让家长心里不是滋味

熙熙说教
2026-08-30 13:35:48
民政部、中央社会工作部、财政部、全国老龄办、中国老龄协会,联合印发通知

民政部、中央社会工作部、财政部、全国老龄办、中国老龄协会,联合印发通知

政知新媒体
2026-09-02 16:34:53
明码标价!冠军沦为阶下囚,20 万买不到青训名额,比男足还黑?

明码标价!冠军沦为阶下囚,20 万买不到青训名额,比男足还黑?

一盅情怀
2026-09-02 11:52:33
太难选择了!成都27岁女生相亲陷入两难:要生理性喜欢,还是要2000万家底

太难选择了!成都27岁女生相亲陷入两难:要生理性喜欢,还是要2000万家底

火山詩话
2026-09-01 07:05:33
2.8亿灵活就业者!这届年轻人,真的交不起社保了?

2.8亿灵活就业者!这届年轻人,真的交不起社保了?

李云飞Afey
2026-08-16 20:03:40
82岁母亲自费住养老院,临终一句话:生前不养,死后无继

82岁母亲自费住养老院,临终一句话:生前不养,死后无继

小虎新车推荐员
2026-09-03 01:45:02
“梓涵”时代已经过去!新一轮小学生名字来袭,老师崩溃了

“梓涵”时代已经过去!新一轮小学生名字来袭,老师崩溃了

哄动一时啊
2026-09-01 14:18:05
他沉默的那一刻,她的身体已经知道答案了

他沉默的那一刻,她的身体已经知道答案了

心事寄山海
2026-09-02 09:08:28
不再逼生二胎三胎!2026生育新政大转向,一胎家庭直接享普惠福利

不再逼生二胎三胎!2026生育新政大转向,一胎家庭直接享普惠福利

蜉蝣说
2026-09-02 17:55:25
课本大换血!数学方程退出小学,家长直呼看不懂

课本大换血!数学方程退出小学,家长直呼看不懂

户外阿毽
2026-08-31 01:42:36
1973 年王玉龄受到周恩来总理接见,聊到张灵甫时总理一番谈话,让王玉龄失声痛哭

1973 年王玉龄受到周恩来总理接见,聊到张灵甫时总理一番谈话,让王玉龄失声痛哭

唠叨说历史
2026-08-15 16:22:23
全是遗憾!央视《醒来》22集大结局,是我今年看过最难过的大结局

全是遗憾!央视《醒来》22集大结局,是我今年看过最难过的大结局

喜欢历史的阿繁
2026-09-03 01:42:01
手握15个世界冠军,和夏煊泽是好兄弟,如今在哈工大当老师太明智

手握15个世界冠军,和夏煊泽是好兄弟,如今在哈工大当老师太明智

寒士之言本尊
2026-09-02 23:30:21
尼泊尔用无人机搜救幸存者,播放歌曲等回应,隧道被泥浆“像牙膏一样”塞满

尼泊尔用无人机搜救幸存者,播放歌曲等回应,隧道被泥浆“像牙膏一样”塞满

红星新闻
2026-09-02 16:23:27
40 年最差!皇马名宿暴怒开喷!穆里尼奥重建彻底失败!

40 年最差!皇马名宿暴怒开喷!穆里尼奥重建彻底失败!

奶盖熊本熊
2026-09-02 07:30:00
昔日国米队长,如今“求人”回归意甲?个人选择失败实在遗憾

昔日国米队长,如今“求人”回归意甲?个人选择失败实在遗憾

里芃芃体育
2026-09-03 11:15:22
2026-09-03 13:03:00
字节漫游指南
字节漫游指南
有态度网友ytd
217文章数 111关注度
往期回顾 全部

科技要闻

大模型扎堆!谷歌刚发,Meta就跟上

头条要闻

"韦东奕教辅书"已售十几万件 有家长要退货:难度一般

头条要闻

"韦东奕教辅书"已售十几万件 有家长要退货:难度一般

体育要闻

小卡回应处罚:不知晓任何规避工资帽意图

娱乐要闻

德云社停更20天再营业!

财经要闻

再见了,期房!商品房预售制卒于2026

汽车要闻

实拍捷途旅行者7 风格更潮/混动版配上华为乾崑ADS 5

态度原创

家居
本地
旅游
健康
亲子

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

旅游要闻

卢沟桥·宛平城景区9月3日免费开放

脑梗能否取栓,关键看这几点!

亲子要闻

儿子说不去幼儿园是因为里面有大毛猴!

无障碍浏览 进入关怀版