网易首页 > 网易号 > 正文 申请入驻

8张GB200干的事,被一张5090接了:国产游戏世界模型开源

0
分享至

不er,印象里特别吃算力的「游戏世界模型」,居然被塞进一张RTX 5090里了?

昆仑万维旗下Skywork AI发布Matrix-Game 4.0,据称是「全球首款可在单张消费级显卡上实时运行的游戏世界模型」。先别急着激动,我把关键数字摆出来,你自己感受一下。

  • 硬件:一张RTX 5090
  • 按键到画面响应:不到0.15秒(约112ms)
  • 运行帧率:60 FPS
  • 显存峰值占用:约18.5GiB
  • 画质:480p

对比一下同一时间英伟达研究团队发布的StreamRender-H3,同样走「代码运行世界、视频模型生成画面」的路线,官方展示的部署配置是8张GB200 GPU,端到端延迟估算约545ms。当然,两者的分辨率和延迟统计口径并不完全一致,不能直接排座次。但单张消费级显卡能跑到这个速度,确实够有冲击力。

以前常见的游戏世界模型Demo,是玩家按一下方向键,模型接着往前生成画面。世界能逛,场景会动,但底下究竟有没有一套真正运行的游戏,不太好说。Matrix-Game 4.0不太一样:玩家中弹,先掉的是盾牌耐久;盾碎了,才开始扣血;等血量归零,游戏真就结束了。原来不只是画面在动,背后的游戏逻辑也跟着跑起来了。

团队给出的核心判断是:与其让视频模型隐式记忆世界,不如让游戏引擎显式维护世界。以谷歌Genie为代表的路线,率先让玩家走进AI实时生成的世界,走到哪里,模型就把画面生成到哪里。但世界能逛,不等于游戏能玩。画面偶尔多一棵树、少一扇窗,顶多让人出戏;可要是NPC的位置、玩家的血量、任务的输赢也由模型临场发挥,那就麻烦了。比画面穿帮更麻烦的,其实是规则脱缰。

所以到了4.0,团队干脆把活儿拆开:游戏引擎负责把游戏跑对,视频模型负责把画面画好。世界状态不再藏在模型生成的像素里,而改由代码明确记录。即使视觉生成偶尔出现偏差,也不会直接改写玩家血量、道具归属和任务进度。团队把这套思路概括为「给视频模型套上Harness」:

  1. 玩家先用自然语言说出想法,Coding Agent负责把它写成游戏代码;
  2. 游戏引擎当「裁判」,维护世界状态、执行游戏规则,并画出一份不会乱的结构草图;
  3. 视频模型当「画师」,照着草图实时生成最终画面。

说白了就是,该确定的交给代码,该发挥的交给AI。最开始,引擎输出的还是一片由方块、骨架和简单地形组成的结构画面,看着多少有点「毛坯房」的意思。但人物在哪、道具在哪、谁在移动,已经交代得明明白白。等视频模型接手,城堡、草地、材质和光影被实时补齐,刚才还是3D草模,转眼就成了完整的游戏画面。

规则还能继续改。想提高武器射速,直接用自然语言告诉Coding Agent,底层代码一改,武器的实际攻击逻辑也跟着变化。一个对战场景,刚好把整套方法跑了一遍:Coding Agent负责改,引擎负责算,视频模型负责画。

但要让规则和画面在一张RTX 5090上同时跑,光是重新分工还不够,还得从工程角度给整条链路减负。

第一减:减少模型需要自己猜的东西。把生成任务变简单——「凭空作画」哪有「照着草图搞精装」来得省力。团队用UE5制作了一批成对数据:一边是结构画面,一边是对应的精细画面。前者不管材质、光影,只保留场景结构、物体位置和运动轨迹。同一个方块,到底是盾牌、NPC还是路障,模型看不出来,于是系统还会读取引擎提供的可见对象和实时状态,动态拼出Caption,告诉模型画面里有什么、正在发生什么。结构画面负责交代「在哪」,动态Caption负责说明「是什么、在干什么」。

第二减:减少模型需要自己记的东西。视频越长,历史画面就越多,每次生成都让模型从头翻记录,不仅费劲,前面画歪的一点还可能被一路带下去。Matrix-Game 4.0基于Wan2.2 5B Fun Control改造出了V2V模型,每次生成除了参考当前的结构画面,还会调用空间记忆参考图、用于衔接的首帧,以及缓存中的近期历史信息。

第三减:减少模型需要计算的东西。团队通过少步自回归蒸馏,把扩散生成过程压缩到只改1步或2步,而且一次只生成四帧。CUDA Graph、FP8融合算子、KV环形缓存和轻量编解码器也全上了。最终,文本编码器、DiT和VAE全部常驻一张RTX 5090。单步去噪时,视频模型的稳态生成速度达到83 FPS,两步去噪时约57 FPS。

这张卡也不是突然就扛住了一切。从Matrix-Game 1.0开始,团队一直在给游戏世界模型补课:1.0先让生成的世界听懂玩家操作,2.0解决实时,3.0补上长时记忆,3.5继续稳住空间和角色。到了4.0,团队开始直面另一道题:这个实时生成、还能记住的世界,什么时候才算一款游戏?

硬件门槛刚砍下来,昆仑万维转头又来了一记:开源。这个动作放在游戏世界模型里,分量比想象中更重。大多数玩家开放的是产品、API或者研究演示,真正把模型和代码交到开发者手里的,还是少数。而且这还不是今天突然想「开」了,这家公司从Matrix-Game 1.0开始就一直走开源路线。

回头看,这么早选择把技术摊开,一个很重要的原因是:世界模型赛道越来越热闹,技术路线却远远没有收敛。有人继续押注视频生成,有人主攻3D空间,还有人重新请回游戏引擎。看着都叫世界模型,底层解法其实已经越走越不一样。唯一逐渐清晰的是,光会生成视频已经不够看了,世界得能进去、能交互,最好还能长期运行起来。

当然,Matrix-Game 4.0现在还只是个开始。480p画质确实谈不上多精细,距离更稳定、更长时间、更多人同时玩的AI世界,也还有一段路。但路都还没定,答案当然也不能只让几家公司关起门来写。谷歌Genie之后,国产玩家这次给出的解法是:代码负责让世界守规矩,AI负责把世界画出来。一张RTX 5090就能跑,模型和代码也一起交了出来。至于后面还能被开发者玩成什么样,那就得看社区自己roll了。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
电梯大局已定:不出意外,老旧小区电梯改造,可能会遇到三大难题

电梯大局已定:不出意外,老旧小区电梯改造,可能会遇到三大难题

兴趣知识
2026-10-15 00:49:54
改籍叛国、卖队泄密?定居泰国执教的冯坤,因一句话实现口碑逆转

改籍叛国、卖队泄密?定居泰国执教的冯坤,因一句话实现口碑逆转

主宰未来
2026-09-24 15:32:39
恩佐:坎特属于那种凭借谦逊打动人心的人,他是非凡的球员

恩佐:坎特属于那种凭借谦逊打动人心的人,他是非凡的球员

懂球帝
2026-10-17 23:05:53
四部门召集30余家车企座谈:不得作虚假、引人误解的宣传

四部门召集30余家车企座谈:不得作虚假、引人误解的宣传

南方都市报
2026-10-16 23:08:07
陈芋汐宣布冲击洛杉矶奥运会!19岁全红婵恢复训练 未来仍不确定

陈芋汐宣布冲击洛杉矶奥运会!19岁全红婵恢复训练 未来仍不确定

念洲
2026-10-17 08:57:45
局势变成33打2,日本和北约包抄俄罗斯后路,中方直接登岛反制

局势变成33打2,日本和北约包抄俄罗斯后路,中方直接登岛反制

云上乌托邦
2026-10-17 20:10:05
我们一家三口现在整整齐齐在家躺着,老公退休金5500,我3860。

我们一家三口现在整整齐齐在家躺着,老公退休金5500,我3860。

小影的娱乐
2026-10-17 12:10:19
医生发现:不容易得癌症的人,一般都有6个特质,你占几个

医生发现:不容易得癌症的人,一般都有6个特质,你占几个

普陀动物世界
2026-10-13 14:56:00
巴黎智驾路测:国内领先集体“折戟”,仅小鹏、特斯拉“应战”

巴黎智驾路测:国内领先集体“折戟”,仅小鹏、特斯拉“应战”

中车网评
2026-10-16 08:49:15
彻底撕破脸!乌克兰,这次走投无路了!

彻底撕破脸!乌克兰,这次走投无路了!

大嘴说天下
2026-10-17 20:40:04
女上位发生性关系,男方被判强奸罪获刑3年

女上位发生性关系,男方被判强奸罪获刑3年

陈宜之
2026-07-26 23:03:01
中央定调,退休新政3大变化,70后二选一,养老金每月最高差338元

中央定调,退休新政3大变化,70后二选一,养老金每月最高差338元

虎哥闲聊
2026-10-16 21:10:26
特朗普自曝:会给自己化淡妆,“如果不化点妆,会看起来像个死人”;他还吐槽有男议员在化妆品上砸了重金,比女议员更多

特朗普自曝:会给自己化淡妆,“如果不化点妆,会看起来像个死人”;他还吐槽有男议员在化妆品上砸了重金,比女议员更多

第一财经资讯
2026-10-17 18:18:17
3-1,0-4!英博三连胜蓉城夺冠暂缓,铁人取3分,中超积分榜更新

3-1,0-4!英博三连胜蓉城夺冠暂缓,铁人取3分,中超积分榜更新

七七自驾游
2026-10-17 22:27:41
一天4个瓜!负债600万、承认恋情、官宣怀二胎,赵丽颖最让人意外

一天4个瓜!负债600万、承认恋情、官宣怀二胎,赵丽颖最让人意外

往史过眼云烟
2026-08-21 11:56:39
大明星赵薇的前夫,判了!

大明星赵薇的前夫,判了!

微微热评
2026-07-29 12:12:29
一旦俄乌冲突结束,三国将面临亡国,还有一国有可能“乌克兰化”

一旦俄乌冲突结束,三国将面临亡国,还有一国有可能“乌克兰化”

史之韵
2026-10-13 13:23:36
苹果“双11”优惠公布:iPhone 17立减1000元,iPhone 18 Pro立减300元

苹果“双11”优惠公布:iPhone 17立减1000元,iPhone 18 Pro立减300元

极目新闻
2026-10-15 11:05:56
剑南春|国米客场3-1逆转博洛尼亚,图拉姆破门,奥古斯托传射

剑南春|国米客场3-1逆转博洛尼亚,图拉姆破门,奥古斯托传射

懂球帝
2026-10-18 02:06:16
王诗龄现身北京三里屯,膀大腰圆全身名牌超富态,疯狂购物引热议

王诗龄现身北京三里屯,膀大腰圆全身名牌超富态,疯狂购物引热议

娱圈办事处
2026-10-13 18:05:14
2026-10-18 04:12:49
晚星归航2
晚星归航2
有态度网友ytd
138文章数 13关注度
往期回顾 全部

游戏要闻

LOL怀旧服上线不到三个月,热度暴跌彻底凉凉?拳头官宣停服时间

头条要闻

普京:包围并消灭2000人的乌军集群 这非比寻常

头条要闻

普京:包围并消灭2000人的乌军集群 这非比寻常

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

庾澄庆罕谈前妻 撕下伊能静仅剩的体面

财经要闻

新一轮大跌源头,找到了!

科技要闻

刘煜辉:99%的黄金分析师报告一钱不值

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

旅游
本地
艺术
房产
公开课

旅游要闻

打造移动旅游驿站 满足不同群体需求

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

艺术要闻

美到窒息!黛安笔下的午后“印象”,明媚又温柔,看完心情都亮了!

房产要闻

利好密集落地+现房好房断档,广州楼市买入窗口,正在倒计时!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版