网易首页 > 网易号 > 正文 申请入驻

刚刚,谷歌新模型全球登顶!

0
分享至


新智元报道


不得了。

谷歌刚刚更新的Gemini Omni 1.1 Flash,直接冲上了Arena文生视频全球第一。

图生视频,全球第二,1488分。



但排名只是开胃菜。

真正的突破是,谷歌把过去AI视频最折磨人的几件事,一口气全改了。

  • 场景延展,模型能回看前面最多10秒的画面接着往下拍,以10秒为一段,累计最长40秒

  • 首尾帧,你指定起始帧和结束帧,中间那段连续运动它自己生成

  • 360p草稿,比720p最多快60%,成本只有三分之一,选中的再一路升到4K

  • 4K放大,成片可以升到1080p或者4K

  • 视频参考,最多3秒的参考视频可以混进输入里,把动作、运镜和节奏一起揉进新镜头


好好好,AI视频这次终于不只会「再抽一张」了。

它开始会接戏、会走位,甚至有点剪辑思维了。

划重点,模型续拍时能看的上下文,从Veo的1秒变成了10秒

治好了金鱼记忆,一次能接40秒

1秒能装下什么呢。

镜头刚推过去,它就忘了刚才谁站在门口、屋里什么色温、这场戏本来要往哪走。所以过去大家用AI视频,基本就是随缘抽卡,生成,不满意,重来。

10秒就不一样了。这里面装着角色的脸、衣服和站位,装着灯光的方向和色温,装着上一句台词的语气,也装着镜头正往哪个方向动。

从1秒到10秒,这是Veo到Omni 1.1之间最大的一步。

光说没意思,直接看效果。

三句话拍出一场戏

首先是一个红发女子的特写,一束红光打在侧脸上。

然后第一句续拍,镜头微微横摇,画面里多出一个卷发男人的背影,他说「我也看见了」,配乐压上来。

第二句,镜头缓缓拉出,两个人原来站在一座积满灰尘、被遗忘的地下墓穴里。

第三句再往外拉,墓穴变成一座巨大的图书馆,书架和书本在尘埃弥漫的虚空里失重漂浮。


三次续拍,红发女子的脸、发色和那束红光全程没崩

从两个人的对视一路拉到一座悬浮的图书馆,中间没有一个剪辑点。

第二组更狠,直接点名要运镜技巧。

Prompt 1 :继续这段视频。执行一个电影级的移动变焦(dolly-zoom)。摄影机向前推进的同时镜头拉远,让角色僵住的惊恐表情始终保持同样大小。背景里那排石柱构成的长廊被强烈的透视畸变拉长、加深。干净的建筑结构,一镜不断。

Prompt 2 :继续这段视频。摄影机快速机械急推,直接怼进角色瞪大的眼睛。

Prompt 3 :继续这段视频。时间彻底冻结成一个静止的瞬间,角色,还有他被风吹起的大衣。摄影机围绕冻结的角色做一次流畅的高速360度环绕,展现柱廊之间强烈的3D纵深和视差。完美连贯。


希区柯克变焦、机械急推、时间冻结环绕,三句话点了三个电影学院要讲一学期的镜头。

对白也能接。

退潮的滩涂上搁着几条蓝白渔船,海鸥低飞。

蓝毛衣男人问了句「你父亲也出海吗」,白胡子老人转过头开口,镜头一镜到底缓缓后拉,他接着讲,「他常说,这个港口是有灵魂的。那些船,是我们的一部分」,音乐渐强。


一段接一段,时间轴一路走到30秒,两个人还并排坐在同一条船上,语气一次没断。

接上的不光是画面,还有一句没说完的话。

最后,还有更放炸的。

一个作家坐在图书馆的书桌前写字,绿罩台灯,窗外是雨。

他忽然抬头直视镜头,讲这最后一章会怎么收尾,然后站起身,绕过书桌一直走到镜头前,问了一句「你会怎么选」。


一个AI生成的人物,就这么把第四面墙推到了!

一个管走位,一个管选角

如果说场景延展管的是「接得上」,那这两个新能力管的就是「按你想的来」。

头尾你定,中间它跑腿

第二个新能力是首尾帧。

你把起始帧和结束帧都给它,中间的连续运动交给模型生成。

这个功能主要冲着复杂运镜、变焦转场和无缝循环去的,过去这类活儿只能靠反复抽卡碰运气。

这条大厅镜头最能炫技。

Prompt:低角度特写,一位穿米色西装的时髦鼓手在大厅里打一套红色鼓组,镜头猛地甩向侧面,柔和的紫色舞台灯下露出一位年长的萨克斯手,旁边是穿白裙旋转的芭蕾舞者。一镜到底,不许跳切。


还有一条更绕的。

镜头一路推进屋里那台老电视的屏幕,屏幕里是同一个房间、同一个穿白裙的女人、同一个开头的画面。无缝衔接,一镜到底。


镜头推进电视屏幕,屏幕里是同一个房间同一个人

动作懒得形容,指着让它抄

第三个新能力是视频参考,最多3秒的参考视频,可以和图片、文字混着一起丢进去。

它改的是沟通方式,你不用再费劲描述一个动作,直接指给它看就行。

Prompt:用上传的三段舞者视频,把里面的人替换成给定的角色,让他们在提供图片里那个开阔空间中一起跳各自的舞。狗(dog.png)跳dance3.mp4里的古典舞,章鱼(octo.png)跳dance1.mp4里的嘻哈,熊(bear.png)跳dance2.mp4里的霹雳舞。最终成片一镜到底,不许有场景切换。


狗跳古典舞,章鱼跳嘻哈,熊跳霹雳舞,一镜到底

已经有两个应用直接吃这两项能力。

一个叫Transition Studio,把头帧和尾帧丢进去,从物体传送门、甩镜、形变匹配、天空替换、前景擦除、时光机里挑一个转场技法,中间那段它自己接。


一个是看房应用,镜头在房间之间推、拉、环绕,把房子放在一天里最好的那个时辰,而且不会凭空添一件不存在的家具。


先抽糊的,中奖了再升4K

360p草稿这个功能,是专门给试错准备的。

AI视频本来就得生成好几条才能挑中一条,谷歌干脆把试错这一步单独做便宜,你先用360p把方向试出来,挑中哪条再升到高分辨率。

360p草稿模式比720p最多快60%,成本只有三分之一。

算笔账就懂了。

一个10秒镜头你想试20个方向,720p抽满20次是20美元,360p抽满20次只要6美元,挑中的那条再花3美元升到4K交片。

Draft Room就是照这个逻辑做的,一条提示词铺出四个变体,一次只改一个维度,摆在一起直接比,选中的再一次性升到1080p或者4K。


那360p到底能糊到什么程度,瞅瞅这条。

Prompt:海洋硅藻的显微视角,玻璃质的硅壳呈现精细的天然对称结构。颜色从深火山琥珀、暖铜色一路排到明亮的绿松石和紫罗兰。微小结构在干净的暗场背景中柔和发光。高保真科学成像,锐利细节,有机质感,微距摄影。全片保持显微镜镜头效果。


草稿阶段能看清结构和调子,也就够用了。真到交片那一步,再输出4K版本即可。


今天全球开放

价格这边全部按秒计费,一共四档。从开发者、企业到普通订阅用户,今天都能上手。

  • 360p,每秒0.03美元

  • 720p,每秒0.10美元

  • 1080p,每秒0.15美元

  • 4K,每秒0.30美元


如果把这五个功能按导演干活的顺序摆一遍,你就会发现它们其实是一条流水线——

首尾帧定分镜,360p拍草稿,视频参考锁角色,场景延展接戏,4K放大交片。

正如Figma Weave创意总监Itay Schiff所说,这一步跨过去,团队就从「生成视频」走到了「真正地导演视频」。

过去一年,AI视频拼的是画质,是物理,是谁的水花更真。

这一次拼的是另一件事,你能不能指挥它。

以前是求它给你一条,现在是让它拍一条。

抽卡时代,到头了。

参考资料:

https://x.com/googleaistudio/status/2093008678118998298

https://blog.google/innovation-and-ai/technology/developers-tools/build-with-gemini-omni-1-1-flash/

编辑:摩西

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
为何生鸡蛋拌饭味道如此平庸,却让日本人着迷?网友掀桌式回答

为何生鸡蛋拌饭味道如此平庸,却让日本人着迷?网友掀桌式回答

另子维爱读史
2026-08-31 20:39:05
国产手机集体涨价,等等党输麻了!

国产手机集体涨价,等等党输麻了!

果粉俱乐部
2026-09-01 13:55:07
上市不到一年,特斯拉 Model Y L 集体后轮塌陷!连根手指都塞不进去...

上市不到一年,特斯拉 Model Y L 集体后轮塌陷!连根手指都塞不进去...

极果酷玩
2026-09-01 22:20:23
爆大冷门!女排亚运12人名单正式曝光,庄宇珊遗憾落选,全新阵容引热议

爆大冷门!女排亚运12人名单正式曝光,庄宇珊遗憾落选,全新阵容引热议

云雨生烟l
2026-09-02 14:01:06
大一女生穿“洛丽塔”报到,本以为能惊艳全场,没想到连行李都没人愿意帮忙搬

大一女生穿“洛丽塔”报到,本以为能惊艳全场,没想到连行李都没人愿意帮忙搬

妍妍教育日记
2026-08-23 10:10:12
盼了这么久,财政部2026年退休人员养老金上调通知到底公布了没?

盼了这么久,财政部2026年退休人员养老金上调通知到底公布了没?

铭记历史呀
2026-09-02 02:07:04
郑丽文回应“请辞党主席”,什么情况?

郑丽文回应“请辞党主席”,什么情况?

新民周刊
2026-09-01 09:11:33
日本这回真摊上大麻烦了!8月29日,美国在没有经过日本的同意下,动用了驻日美军基地的战斗机去打伊朗,现在伊朗不乐意了

日本这回真摊上大麻烦了!8月29日,美国在没有经过日本的同意下,动用了驻日美军基地的战斗机去打伊朗,现在伊朗不乐意了

扶苏聊历史
2026-09-02 15:31:10
26所学校一个学生都没招到!民办本科的“淘汰赛”正式打响

26所学校一个学生都没招到!民办本科的“淘汰赛”正式打响

起喜电影
2026-09-02 00:07:53
北方再崛起:中国正在发生第4次战略巨变,6亿人或将因此受益!

北方再崛起:中国正在发生第4次战略巨变,6亿人或将因此受益!

南风不及你温柔
2026-09-02 05:54:26
寿命长不长,看体重就知?过了71岁以后,体重最好保持在这个范围

寿命长不长,看体重就知?过了71岁以后,体重最好保持在这个范围

任医生聊健康
2026-09-02 12:55:14
富得流油,英超三支升班马总支出5.45亿欧,超西甲皇萨竞总和

富得流油,英超三支升班马总支出5.45亿欧,超西甲皇萨竞总和

懂球帝
2026-09-02 13:22:07
星宇股份董事长两次道歉

星宇股份董事长两次道歉

扬子晚报
2026-09-02 12:48:05
硬仗拉满!严子怡总决赛遇死亡阵容,夺冠真的不稳了

硬仗拉满!严子怡总决赛遇死亡阵容,夺冠真的不稳了

涵有话说
2026-09-02 10:01:34
真要无球可打了?郭艾伦未能完成注册,亲自开口,一句话叫人泪目

真要无球可打了?郭艾伦未能完成注册,亲自开口,一句话叫人泪目

萌兰聊个球
2026-09-02 19:16:24
新款 iPad mini 史诗级更新!即将发布

新款 iPad mini 史诗级更新!即将发布

花果科技
2026-08-31 22:21:22
犯罪嫌疑人李某,被当场控制

犯罪嫌疑人李某,被当场控制

南方都市报
2026-09-01 22:39:22
印度总理莫迪告诉普京,为了全人类的利益,乌克兰战争必须结束

印度总理莫迪告诉普京,为了全人类的利益,乌克兰战争必须结束

李健政观察
2026-09-02 18:21:33
侯英超:目前国乒能赢张本和松岛的只有2人!

侯英超:目前国乒能赢张本和松岛的只有2人!

乒乓乐园
2026-09-02 00:21:03
炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

悠悠说世界
2026-08-17 13:48:27
2026-09-02 19:52:49
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
16089文章数 67023关注度
往期回顾 全部

科技要闻

凌晨最强模型上新,Claude Fable 5.1发布

头条要闻

被星宇股份裁掉的107名应届生 损失远远不止一份工作

头条要闻

被星宇股份裁掉的107名应届生 损失远远不止一份工作

体育要闻

一次有奖问答,让他成为欧冠主帅

娱乐要闻

香港武打影星陈观泰离世,终年80岁

财经要闻

北京首钢园数采中心停运,“百万小时”产能目标的账还算得过来吗?

汽车要闻

10万级的满配B级车 试驾2027款比亚迪海豹06

态度原创

本地
旅游
游戏
公开课
军事航空

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

旅游要闻

京郊宠物友好地图上线,210处打卡地+10条主题线路携宠出游

《FF7》蒂法惨遭DLSS5摧残!变大妈难以接受

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普威胁伊朗终极打击蓄势待发

无障碍浏览 进入关怀版