网易首页 > 网易号 > 正文 申请入驻

视频分析成本砍66%,谷歌新功能让AI学会“挑着看”

0
分享至

谷歌今天给开发者送了个大礼包。在最新的 Gemini 3.7 Flash、3.6 Flash 和 3.5 Flash-Lite 模型中,一项名为“智能体视频理解”的新功能正式上线。它的核心卖点很直接:让 AI 看视频时不再“傻看”,而是学会“挑着看”——结果就是分析成本最高降 66%,Token 消耗最高降 88%,准确率还能提升最高 7%。

这组数字放在长视频场景里尤其诱人。过去开发者处理几小时的视频素材,往往要在“烧掉海量 Token”和“漏掉关键细节”之间做痛苦取舍。现在,谷歌给出的方案是让模型自己决定该看什么、看多快、用哪种方式看。


从“逐帧扫”到“按需看”

传统静态处理方式很简单粗暴:模型按固定帧率读取视频,默认每秒 1 帧,开发者可以通过 API 调整。这种方式的问题在于,不管视频里有没有重要内容,模型都得从头到尾“扫”一遍,Token 消耗自然居高不下。

智能体视频理解则完全不同。它把模型的核心推理能力与原生视频工具结合起来,让 Gemini 能在视觉帧、音频和转录文本中动态搜索、扫描和检查目标片段。换句话说,模型不再被动接收所有画面,而是主动、有目标地决定:哪些内容值得看、以什么速度看、通过哪种模态获取信息——帧、音频还是转录文本。

这种“按需取用”的逻辑,只提取所需的片段和信号。以前这些精细操作全靠开发者手动完成,现在 Gemini 通过智能循环自动搞定,开发工作量大幅缩减。

四个新能力,专治长视频痛点

谷歌为这项功能总结了四个典型应用场景,每一个都直指长视频处理的传统痛点:

  • 亚秒级时刻检索:精准定位在 1 FPS 下容易错过的瞬间状态变化和紧凑剪辑边界,高精度自动化视频编辑成为可能。
  • 长视频“大海捞针”搜索:在长达数小时的视频中回答复杂查询,无需消耗数百万 Token。
  • 异常检测:对感兴趣的时间窗口以更高帧率重新采样,快速捕捉快速运动和细微视觉伪影。
  • 动作与物体计数:随时间精准追踪重复的物理动作和不同物体。

谷歌特别提到,Gemini 3.7 Flash 搭配智能体视频理解能实现最佳整体质量,在质量与成本效率间达到最优平衡,处于视频理解任务中准确率与成本的帕累托最优前沿。

上线即用,价格不额外加收

对开发者来说,最友好的部分在于接入成本。该功能使用标准 Gemini API Token 定价,不收取额外功能费用。目前已在 Google AI Studio 和 Gemini Enterprise Agent Platform 的 Gemini API 中上线,支持视频上传和 YouTube 视频分析。开发者只需在 API 配置中将处理模式设置为“agentic”即可启用。

谷歌的野心不止于开发者。这项能力很快会推向更多面向普通用户的产品:Gemini 应用中所有 Flash 和 Flash-Lite 模型用户即将获得该功能;未来几个月内,它还将为 YouTube 视频观看页的“Ask YouTube”功能提供支持,借助 Gemini 给出基于视频画面的更高质量回答。

从“静态扫帧”到“智能体式检索”,谷歌这次把视频理解的效率天花板又抬高了一截。对于每天和长视频数据打交道的团队来说,这可能是近期最值得试一次的新工具。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
29分惨败!女篮世界杯前夕遭当头一棒:韩旭回归却被法国队打爆了?

29分惨败!女篮世界杯前夕遭当头一棒:韩旭回归却被法国队打爆了?

篮球快餐车
2026-09-02 18:01:54
美军称完成一波针对伊朗军事目标的打击行动

美军称完成一波针对伊朗军事目标的打击行动

新京报
2026-09-02 07:22:07
字节赌对了?Anthropic正式宣战蒸馏

字节赌对了?Anthropic正式宣战蒸馏

第四波
2026-09-02 17:04:10
2026年小学入学人数大降:河南山东近乎腰斩,北方七省超40%

2026年小学入学人数大降:河南山东近乎腰斩,北方七省超40%

老郭在学习
2026-09-02 08:19:50
阿贾克斯三杰,德容、德利赫特和范德贝克重聚

阿贾克斯三杰,德容、德利赫特和范德贝克重聚

懂球帝
2026-09-03 04:25:07
朱倩老师真实颜值曝光,和精修图对比差距很大

朱倩老师真实颜值曝光,和精修图对比差距很大

映射生活的身影
2026-09-02 10:15:34
宇树科技盘中跌超4%,股价首次跌破550元,此前曾回应称很多网传消息不实

宇树科技盘中跌超4%,股价首次跌破550元,此前曾回应称很多网传消息不实

每日经济新闻
2026-09-02 21:46:29
谁干的?俄罗斯军官被斩首,美英法集体沉默,普京连下三条命令

谁干的?俄罗斯军官被斩首,美英法集体沉默,普京连下三条命令

闻识
2026-09-02 11:17:04
演员戚薇“卖脸”给AI公司被指缺钱,本人回应:完全不考虑回报那是假话,我没有必要装清高,暂时还没考虑《末日盛夏》是不是可以赚钱

演员戚薇“卖脸”给AI公司被指缺钱,本人回应:完全不考虑回报那是假话,我没有必要装清高,暂时还没考虑《末日盛夏》是不是可以赚钱

扬子晚报
2026-09-02 17:31:37
港姐冠军Bra Top解扣,拱桥骚腹肌网民狂赞劲过十年前

港姐冠军Bra Top解扣,拱桥骚腹肌网民狂赞劲过十年前

粤睇先生
2026-09-02 22:49:25
中国女性又改称呼了,别再叫“美女”了,现在流行这3种称呼

中国女性又改称呼了,别再叫“美女”了,现在流行这3种称呼

新时代的两性情感
2026-09-03 00:42:57
刘翔近况曝光,或将被上海体育局清退,这些年他经历了啥

刘翔近况曝光,或将被上海体育局清退,这些年他经历了啥

财叔
2026-09-02 23:04:05
中国女篮深夜再遭打击!李月汝确认无缘世界杯:篮协这波操作太糊涂了

中国女篮深夜再遭打击!李月汝确认无缘世界杯:篮协这波操作太糊涂了

篮球快餐车
2026-09-03 00:21:16
开始收网了,尼日利亚没料到,中方出手第一招,就是釜底抽薪?

开始收网了,尼日利亚没料到,中方出手第一招,就是釜底抽薪?

安安说
2026-09-02 12:18:45
如果当初梁思成的方案被采纳,也许今天的北京是这个样子的

如果当初梁思成的方案被采纳,也许今天的北京是这个样子的

浩渺青史
2026-09-02 02:48:33
快船猛龙交易预计可以达成 小卡全身而退重返猛龙

快船猛龙交易预计可以达成 小卡全身而退重返猛龙

体坛周报
2026-09-03 08:30:09
东南亚的骗子都已经说了:普通人一辈子存款天花板是30万,电诈人员经过数据分析出来的。日本旅游签门槛是存款10万,招行金葵花门槛是50万

东南亚的骗子都已经说了:普通人一辈子存款天花板是30万,电诈人员经过数据分析出来的。日本旅游签门槛是存款10万,招行金葵花门槛是50万

纯洁的微笑
2026-09-02 12:19:46
西甲第4轮,皇马vs皇家贝蒂斯 ,穆帅有望变阵4‑3‑3,1.4亿欧新援迪奥曼德或进入首发阵容

西甲第4轮,皇马vs皇家贝蒂斯 ,穆帅有望变阵4‑3‑3,1.4亿欧新援迪奥曼德或进入首发阵容

福酱的小时光
2026-09-03 07:28:29
卷入景甜风波,百万粉网红遭封杀!

卷入景甜风波,百万粉网红遭封杀!

财经三分钟pro
2026-09-01 12:33:28
俄专家警告:称霸世界250年的美国,撞上如今中国,罕见慌了!

俄专家警告:称霸世界250年的美国,撞上如今中国,罕见慌了!

军机Nova
2026-09-03 00:22:12
2026-09-03 08:55:00
我是一个粉刷匠2
我是一个粉刷匠2
有态度网友ytd
196文章数 165关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

NBA官方重磅罚单:快船将被没收五个首轮选秀权

头条要闻

NBA官方重磅罚单:快船将被没收五个首轮选秀权

体育要闻

一次有奖问答,让他成为欧冠主帅

娱乐要闻

香港武打影星陈观泰离世,终年80岁

财经要闻

星宇股份的麻烦,才刚开始

汽车要闻

配双腔空悬+机械差速锁 传祺越7预售权益价17.18万起

态度原创

艺术
亲子
时尚
教育
军事航空

艺术要闻

法国现代艺术大师,马蒂斯作品欣赏!

亲子要闻

萌娃变身“小医生”,罗湖开展探秘手术室少儿科普实践活动

白衬衫不火了?早秋穿“棕色衬衫”更高级好看

教育要闻

教育的最高境界:是唤醒孩子学习的“内驱力”

军事要闻

特朗普威胁伊朗终极打击蓄势待发

无障碍浏览 进入关怀版