网易首页 > 网易号 > 正文 申请入驻

视频分析成本砍88%,Gemini新功能让AI自己找重点

0
分享至

一段90分钟的讲座视频,过去AI分析要烧掉大量算力,现在成本能砍掉近九成。Google DeepMind在2026年9月1日发布了Gemini的「Agentic Video Understanding」功能,让AI不再傻乎乎地把整段视频从头到尾读一遍,而是像人一样,先听问题,再带着目的去视频里找答案。

这个功能目前已经在Gemini 3.7 Flash、Gemini 3.6 Flash和Gemini 3.5 Flash-Lite上开放使用。核心变化在于,AI从「被动接收」变成了「主动侦查」——它会根据你的提问,自己决定该看视频的哪一段、该用多高的清晰度去看。


传统方式为什么又贵又笨?


过去Gemini处理视频用的是「静态处理」:不管视频多长,统一按每秒1帧的速率抽帧,然后把所有画面和音频一股脑塞给模型。这个方法对付短视频还行,但遇到几十分钟甚至几小时的素材就麻烦了——要么消耗大量token,要么为了省成本降低帧率,结果把一闪而过的关键画面漏掉了。

Agentic Video Understanding的思路完全不同。它让Gemini先理解问题,再反过来决定「我需要看视频的哪个部分」。如果某个区间的信息不够,它还能主动调整那个区间的帧率和分辨率,重新看一遍。处理资源不再平均分配,而是集中火力在真正需要的地方。

能干什么?从数拍手到找剪辑点

Google官方举了几个典型场景,每一个都踩在传统方案的痛点上:

  • 数动作次数:比如数一段视频里拍了多少次手。快速动作在1FPS的静态处理下很容易被漏掉或混淆,新功能可以自动提高帧率重新确认。
  • 找剪辑点:定位视频编辑中剪切的位置,这类瞬间变化往往只有几帧。
  • 长视频搜索:在数小时的录像里找某个特定事件,不用从头到尾全看一遍。
  • 异常检测:先低帧率扫一遍,发现异常区间再提高帧率细看。

Google给出的测试数据显示,相比传统静态处理,Agentic Video Understanding能把token消耗最多降低88%,同时精度最高提升约7%。在10分钟的解说视频、90分钟的讲座这类中长视频上,效率改善尤其明显。

成本与精度的「帕累托前沿」

在专门测试长视频理解能力的「1H-VideoQA」基准上,Google对比了单次查询的成本和精度。结果启用Agentic Video Understanding的Gemini 3.7 Flash,在所有被测模型中处于「帕累托前沿」——简单说,就是没有其他模型能在同等成本下做到更高精度,或在同等精度下做到更低成本。整体分析成本最多可削减66%


这个结果并不意外。过去处理长视频,大量token浪费在无关画面上;现在AI只盯着关键区间看,省下的算力自然可观。

怎么用?API指定一下就行

开发者想用这个功能很简单:在Gemini API里把视频处理方式指定为「agentic」即可。目前Google AI Studio和Gemini Enterprise Agent Platform已经支持,上传的视频和公开的YouTube视频都能分析。功能本身不额外收费,只按正常的Gemini API token价格计费。

如果你处理的是5分钟以内的短视频、更看重响应速度,Google也保留了传统的静态处理模式,开发者可以根据场景自行选择。

下一步:进入Gemini应用和YouTube

Google不打算把这个能力锁在API里。官方计划在近期把Agentic Video Understanding带到Gemini应用的Flash和Flash-Lite版本中。另外,几个月内还会集成到YouTube视频观看页面的「Ask YouTube」功能里,让用户直接对着视频提问时,AI能给出更靠谱的回答。

从「AI看视频」到「AI知道该看哪里」,这个转变听起来不大,但对长视频分析的成本结构来说,是一次实打实的改变。对于经常处理会议录像、课程回放、监控素材的团队,这个功能值得第一时间试试。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
快讯!伊朗传来消息!

快讯!伊朗传来消息!

故事终将光明磊落
2026-09-03 13:04:36
降价也卖不动,近400万吨小龙虾,都去哪了?

降价也卖不动,近400万吨小龙虾,都去哪了?

钛媒体APP
2026-09-03 12:10:06
4年926万美元!骑士官宣签约迪奥普 米切尔哈登领军14+3新阵冲冠

4年926万美元!骑士官宣签约迪奥普 米切尔哈登领军14+3新阵冲冠

罗说NBA
2026-09-03 04:59:49
美民众抗议不断,特朗普张嘴就来:你们再闹下去,中国就要赢了!

美民众抗议不断,特朗普张嘴就来:你们再闹下去,中国就要赢了!

福建睿平
2026-09-03 07:27:27
做饭尽量别放这两种调料,长期吃伤身,很多家庭天天在用

做饭尽量别放这两种调料,长期吃伤身,很多家庭天天在用

椰青美食分享
2026-09-02 00:46:56
250天海上漂泊后,美军航母水兵在泰国这样解压

250天海上漂泊后,美军航母水兵在泰国这样解压

多多爱探索
2026-09-03 22:01:58
理想L8车主看完沉默,问界M7准车主开始退订:比亚迪海狮08起售仅22.99万

理想L8车主看完沉默,问界M7准车主开始退订:比亚迪海狮08起售仅22.99万

道哥说车
2026-09-03 09:03:33
许多演员不和孙俪合作的原因,不是人缘差,刘涛早就说过,她太细节控了

许多演员不和孙俪合作的原因,不是人缘差,刘涛早就说过,她太细节控了

落雪听梅a
2026-09-02 06:12:56
民主党还能赢2026吗?

民主党还能赢2026吗?

美国华人杂谈
2026-09-03 05:46:51
摩根嘲讽梅西广告:体育史上最狂妄、最厚颜无耻的吹嘘之言

摩根嘲讽梅西广告:体育史上最狂妄、最厚颜无耻的吹嘘之言

懂球帝
2026-09-03 07:25:05
“她是桃花眼,前途不敢估量”,女孩考上中山大学,面相火了

“她是桃花眼,前途不敢估量”,女孩考上中山大学,面相火了

世界圈
2026-08-21 09:05:40
自住就不在乎房价涨跌?苏州太仓夫妻打拼十几年,240万买房如今只值150万,经常只舍得吃一个菜,人生意义在哪

自住就不在乎房价涨跌?苏州太仓夫妻打拼十几年,240万买房如今只值150万,经常只舍得吃一个菜,人生意义在哪

捣蛋窝
2026-09-03 21:35:23
山东一小学多名学生转新校区后头晕流鼻血,有人被诊断为刺激性气体中毒,多方回应:甲醛合格,异味或来自油漆门现已拆除,相关部门已介入

山东一小学多名学生转新校区后头晕流鼻血,有人被诊断为刺激性气体中毒,多方回应:甲醛合格,异味或来自油漆门现已拆除,相关部门已介入

潇湘晨报
2026-09-03 17:54:19
哪怕你正蹲厕所,也把这条看完!这6件事没人告诉你,但能保命

哪怕你正蹲厕所,也把这条看完!这6件事没人告诉你,但能保命

小鹿姐姐情感说
2026-09-03 07:55:52
越南少将坦言:如果当时中国军队在谅山再多待五天,布防在那里的越军,不是被打散的问题,而是从建制上被彻底抹掉的问题, 一个都不剩下

越南少将坦言:如果当时中国军队在谅山再多待五天,布防在那里的越军,不是被打散的问题,而是从建制上被彻底抹掉的问题, 一个都不剩下

人生录
2026-08-08 00:05:22
蔡卓妍曝老公求婚过程,回应是否有计划生孩子:“顺其自然啦”

蔡卓妍曝老公求婚过程,回应是否有计划生孩子:“顺其自然啦”

韩小娱
2026-09-03 21:15:20
景甜事件彻底失控!香港富豪爆大料,证实剧组夫妻,牵扯多位明星

景甜事件彻底失控!香港富豪爆大料,证实剧组夫妻,牵扯多位明星

白色得季节
2026-09-01 00:32:28
这部封神之作,终于等到了

这部封神之作,终于等到了

来看美剧
2026-09-01 21:18:22
50岁林心如在九寨沟拍摄被偶遇, 原相机无美颜,导游:本人更美!

50岁林心如在九寨沟拍摄被偶遇, 原相机无美颜,导游:本人更美!

可乐谈情感
2026-09-03 06:46:19
万亿资产归零,全国第四大保险集团破产,1.5万亿保单怎么样了?

万亿资产归零,全国第四大保险集团破产,1.5万亿保单怎么样了?

米果说识
2026-08-17 19:17:49
2026-09-04 00:11:00
字节漫游指南
字节漫游指南
有态度网友ytd
254文章数 111关注度
往期回顾 全部

科技要闻

英伟达129亿美元拿下Hugging Face

头条要闻

男子逛夜市遭按摩摊大妈拉住 被5个大妈服务按到发红

头条要闻

男子逛夜市遭按摩摊大妈拉住 被5个大妈服务按到发红

体育要闻

梅西:巴萨10号与阿根廷10号

娱乐要闻

王宝强携女友回工作室!相恋8年仍未婚

财经要闻

章子怡套现3亿 上美拿什么补韩束的缺?

汽车要闻

限时权益价28.99万起 FREELANDER神行者8正式上市

态度原创

艺术
家居
房产
健康
教育

艺术要闻

投资8亿,全球最大!北京文化新地标2028年建成

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

投资50亿!三亚又一重大配套,方案曝光!

脑梗能否取栓,关键看这几点!

教育要闻

科利华新校区亮相,"梅园"变了!学区格局悄悄在变

无障碍浏览 进入关怀版