网易首页 > 网易号 > 正文 申请入驻

世界模型的门槛,谷歌可能迈过去了

0
分享至

文 | 世界模型工场

Google可能要放大招了。

就在Google I/O 2026开幕前夕,两条由Google尚未发布的新视频模型Gemini Omni生成的视频悄悄流出。

没有任何官方预告,没有任何发布会造势,整个社交媒体都炸翻了。

一条视频是一位教授站在黑板前,手持粉笔,一步步推导三角恒等式;

另一条是两名男士坐在海边高档餐厅,安静地吃意大利面。

Reddit和X的评论区,铺天盖地的都是同一句话:"这不可能是现有的技术水平。"

两个看似普通的日常场景,为什么让见惯了AI生成内容的技术圈集体侧目?

令人震惊的视频

先说“教授黑板讲课”视频,生成它只用了一条prompt:

"一位教授在传统黑板上写出三角恒等式的数学证明,同时用语言解释他当前正在推导的步骤。"

一条指令,没有多轮对话,没有分步骤控制。

出来的结果是,教授手持粉笔,逐步写下公式,同时开口讲解,画面流畅,板书工整。


听起来好像平平无奇。

但如果你了解当前视频生成模型的技术边界在哪里,就会明白Gemini Omni同时做到了三件事,而这三件事,以前从来不会同时出现。

第一,推理对了。

黑板上的证明过程在数学上是成立的,不是视觉上长得像公式的符号堆砌,而是数学意义上真实有效的推导。

要做到这一点,模型至少要在token预测之外,具备一定的符号推理能力(symbolic reasoning)。

即知道下一步应该出现什么公式,而不是随机采样一个看起来像数学的图案。

语义准确性叠加在视觉生成之上,正是大多数视频模型会在这类测试中失败的原因。

第二,空间关系对了。

评测者描述,粉笔书写时的手部和手臂动作"读起来是自然的",黑板上的方程式清晰可辨。

手部,是AI视频生成里公认最容易穿帮的地方。

手指数量错误、关节扭曲、与物体的空间关系失真,这是行业里几乎每一代视频模型都栽过的坑。

一支粉笔被正确握持,在黑板上留下有意义的笔迹,手腕的力道、落笔的角度,都在合理的范围内。

这一关,比画一只正常的手还要难,因为手在这里还要和黑板、粉笔、书写行为,形成完整的空间逻辑。

第三,时序对了。

这是最被低估的一件事。

教授写下某个推导步骤的同时,口头讲解的正是这个步骤,板书进度与语音内容保持同步。

这不只是音视频的帧级对齐(frame-level alignment),而是视觉事件、语义事件、时间事件三者之间的跨模态协调。

任何一个维度的理解出现偏差,结果就会是"手在写A,嘴在讲C"。

这种错位,人类观众一眼就能感知到。

如果这三件事只是分别做到,我们可以认为是三个专项模块拼在一起的结果。

但三者同时成立、彼此协调,更可能是模型在某个表征层面上,已经对"教授在黑板上讲课"这件事形成了整体性的语义理解。

换句话说,它知道这件事在现实世界里是什么样子,知道其中各个元素之间的约束关系。

这也是为什么"世界模型"这个词,会在这条视频流出后开始被频繁提及。

在黑板视频流出的同时,还有另一条视频一起曝光:两名男士在海边高档餐厅吃意大利面。

这个场景的选择,不是随机的。

2024年,一段AI生成的"Will Smith吃意大利面"视频在网上疯传。

画面里的手指数量不对,面条像活物一样扭动,叉子和嘴的空间关系完全失控。

那段视频成了早期AI视频生成能力的耻辱柱。


图为"Will Smith吃意大利面"视频截图

而这一次,Gemini Omni生成的结果,有用户评论是"令人难以置信地真实"。

这背后考验的,是模型对刚体与柔性体之间动态交互的建模能力:

叉子是硬的,面条是软的,两者在接触时会产生形变,而形变的方式必须符合现实世界里的物理直觉。

这正是早期生成模型在隐式物理模拟(implicit physics simulation)上的致命短板。

一个模型,在两条视频里,分别碰到了视频生成最难的两类问题:

一类是符号、语音与画面的同步,另一类是人与物体、刚体与柔性体的交互,并把这些问题推进到一个更可用的状态。

Gemini Omni展示的,更像是一个对世界有着更深理解的基座模型。

Gemini Omni的冲击

截至目前,Google还没有发布Gemini Omni的任何技术文档,也没有公开任何模型参数或基准测试数据。

但关于Gemini Omni的架构,目前外界存在三种解读。

最保守的说法是,Omni只是Veo的品牌重命名,底层推理引擎没有根本变化;

第二种说法是,Omni是在Gemini架构下重新训练的全新视频模型,与Veo并行但独立;

第三种说法最激进,认为Omni是一个真正意义上的原生多模态统一模型,在单一架构里原生处理文字、图像、视频和音频。

基于以上两段视频的表现,第三种解读反而像是"Omni"这个命名最合理的指向,毕竟在拉丁语中,"omnis"意味着所有。

如果Omni真正打通了多模态链路,模型竞争的焦点就会发生根本性的转变。

不再是谁能拍出更像电影的画面,而是谁是内容创作者的唯一目的地。

虽然现在还不能说Gemini Omni已经是世界模型,但它至少说明,视频生成正在逼近世界模型要解决的问题:

如何在时间中维持一个可解释、可编辑、可连续推演的场景。

产品层面的冲击同样不容忽视。

今天一条AI视频的生产链路,通常需要串联语言模型写脚本、图像模型做故事板、视频模型做动画渲染、再加外部剪辑软件做后期处理。

每一次跨工具切换,都意味着信息损耗和风格漂移。

一旦Gemini Omni对话式视频编辑成立,这条链路就可能被一个对话窗口替代了。

更关键的是,如果Omni被放入Gemini入口,并与Gmail、Google Docs、YouTube、Android深度打通,这是字节Seedance、快手Kling在分发层面根本无法复制的生态优势。

技术能力决定上限,生态决定规模。

Gemini Omni真正的威胁,或许不在于它今天生成的视频有多好,而在于它把视频生成能力放在了一个竞争对手根本进不去的地方,后者对前者几乎构成降维打击。

世界模型时刻或许来临

过去几年,生成式AI的进化路径相对清晰。

语言模型学会了读和写,图像模型学会了看和画,视频模型学会了动。

每一个模态都在自己的赛道上快速迭代,但它们之间始终存在一道隐形的墙。

模型知道文字,也知道图像,但它不理解文字和图像之间、声音和动作之间、逻辑和画面之间的约束关系。

如果说ChatGPT时刻定义了语言的边界,Sora时刻定义了视频的边界,那Gemini Omni指向的,很可能是第一个真正意义上的"世界模型时刻"。

模型第一次开始理解,模态与模态之间在现实世界里的约束关系,而不只是分别生成它们。

这是一次质的飞跃。

当然,Gemini Omni是否真正实现了这一点,在5月19日Google I/O 2026大会之前,没有人能给出确定的答案。

但泄露出来的视频,给出的信号已经足够有力。

接下来Google会在台上说什么,我们很快就会知道。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
心伤透了!伊藤美诚清空乒乓内容、删掉运动员身份!12年来首次无缘国家队

心伤透了!伊藤美诚清空乒乓内容、删掉运动员身份!12年来首次无缘国家队

十点街球体育
2026-10-16 21:30:04
上海大师赛大冷!头号种子兹维列夫1-2遭弗基纳逆转 无缘重返决赛

上海大师赛大冷!头号种子兹维列夫1-2遭弗基纳逆转 无缘重返决赛

醉卧浮生
2026-10-17 18:45:24
华南虎没有灭绝?专家:如果还有,最可能在山西,不在广东福建

华南虎没有灭绝?专家:如果还有,最可能在山西,不在广东福建

掠影后有感
2026-10-17 09:52:00
上海那个被捧上天的阿大葱油饼,最终还是栽在亲儿子手里

上海那个被捧上天的阿大葱油饼,最终还是栽在亲儿子手里

椰青美食分享
2026-10-15 10:28:18
出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

汉史趣闻
2026-09-01 17:55:01
肠癌“源头”已发现,油炸没上榜,第一种很多人可能每天都在吃!

肠癌“源头”已发现,油炸没上榜,第一种很多人可能每天都在吃!

芹姐说生活
2026-10-13 21:39:26
男人和女人发生关系后,通常都会出现这些心理变化

男人和女人发生关系后,通常都会出现这些心理变化

荷兰豆爱健康
2026-10-18 00:01:35
16GB+1TB!新机官宣:10月15日,首发上市!

16GB+1TB!新机官宣:10月15日,首发上市!

科技堡垒
2026-10-15 12:08:00
常规赛首轮!广东男篮VS南京男篮,赛前带来广东男篮胡明轩、徐杰、新大小外援以及南京男篮杜润旺的最新消息

常规赛首轮!广东男篮VS南京男篮,赛前带来广东男篮胡明轩、徐杰、新大小外援以及南京男篮杜润旺的最新消息

凯丰侃球
2026-10-18 00:03:07
让灵活就业人员贷款交社保推出“社银贷”,真荒诞!

让灵活就业人员贷款交社保推出“社银贷”,真荒诞!

A活着
2026-10-17 10:31:54
演员张佳宁连续两月被拍到挺孕肚现身,本人及工作室均未正面回应;此前表示结婚会公开,受父母婚姻影响称坚决不会离婚,未来生两个孩子

演员张佳宁连续两月被拍到挺孕肚现身,本人及工作室均未正面回应;此前表示结婚会公开,受父母婚姻影响称坚决不会离婚,未来生两个孩子

台州交通广播
2026-10-17 12:49:57
最新国产降糖新药正式发往全国,十大优点成为降糖治疗新武器

最新国产降糖新药正式发往全国,十大优点成为降糖治疗新武器

宝哥精彩赛事
2026-10-17 10:47:51
连看四集《嫁金钗》,我想说:古装剧的大门要被田曦薇给踹烂了

连看四集《嫁金钗》,我想说:古装剧的大门要被田曦薇给踹烂了

娱圈办事处
2026-10-16 20:57:32
16岁少年持枪闯入小学杀害4人,英雄路人追进学校击毙枪手,但可能面临刑事指控

16岁少年持枪闯入小学杀害4人,英雄路人追进学校击毙枪手,但可能面临刑事指控

大洛杉矶LA
2026-10-17 04:40:52
美国死刑直播,为何全世界哭的最大声的是中国法学界?

美国死刑直播,为何全世界哭的最大声的是中国法学界?

步论天下事
2026-10-15 10:25:45
14个毛体字我认对3个,剩下11个交给你了!写大字时手臂幅度变大,细笔画怎么做到收放自如?

14个毛体字我认对3个,剩下11个交给你了!写大字时手臂幅度变大,细笔画怎么做到收放自如?

书画相约
2026-10-17 22:46:24
三司会审!余承东称正义虽迟但到,懂车帝连夜删除尊界V800测评视频!网友:当特斯拉已经能飞的时候,我们还在讨论刹车踏板

三司会审!余承东称正义虽迟但到,懂车帝连夜删除尊界V800测评视频!网友:当特斯拉已经能飞的时候,我们还在讨论刹车踏板

大白聊IT
2026-10-17 00:31:40
892409-6!史上最悬殊的惨败!老詹大帝布朗做到了!

892409-6!史上最悬殊的惨败!老詹大帝布朗做到了!

贵圈真乱
2026-10-17 12:03:07
特朗普刚签对俄重罚,28天后自己叫停:500%关税先不收了

特朗普刚签对俄重罚,28天后自己叫停:500%关税先不收了

桂系007
2026-10-17 23:44:35
不接受道歉!朱之文回应被举报十几场商演取消: 我也会给他找麻烦

不接受道歉!朱之文回应被举报十几场商演取消: 我也会给他找麻烦

青辉
2026-10-17 15:38:44
2026-10-18 01:43:00
钛媒体APP incentive-icons
钛媒体APP
独立财经科技媒体
140636文章数 862676关注度
往期回顾 全部

科技要闻

刘煜辉:99%的黄金分析师报告一钱不值

头条要闻

普京:包围并消灭2000人的乌军集群 这非比寻常

头条要闻

普京:包围并消灭2000人的乌军集群 这非比寻常

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

庾澄庆罕谈前妻 撕下伊能静仅剩的体面

财经要闻

新一轮大跌源头,找到了!

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

艺术
时尚
教育
房产
手机

艺术要闻

美到窒息!黛安笔下的午后“印象”,明媚又温柔,看完心情都亮了!

降落伞裤的3组搭配,打破秋冬沉闷感!

教育要闻

多地试点直升高中!说明了什么?会有哪些新问题?

房产要闻

利好密集落地+现房好房断档,广州楼市买入窗口,正在倒计时!

手机要闻

消息称三星计划开发全新Galaxy OS系统,预计于2028年随Galaxy S28系列手机亮相

无障碍浏览 进入关怀版