网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美国跟法国“杠上了”

美国跟法国“杠上了”

环球时报国际
2026-09-10 16:28:40
1960年康生提议原子弹两年后爆炸,毛主席:那你去当二机部部长吧!

1960年康生提议原子弹两年后爆炸,毛主席:那你去当二机部部长吧!

香姨谈史
2026-09-11 06:00:08
“弟弟举报哥哥冒名顶替上大学案”最新进展:哥哥唐时达向五部门举报湘潭大学,质疑湘大花40万元律师费代理此案

“弟弟举报哥哥冒名顶替上大学案”最新进展:哥哥唐时达向五部门举报湘潭大学,质疑湘大花40万元律师费代理此案

台州交通广播
2026-09-10 18:48:39
重庆一90岁老人去世,娘家来了46人吃席,仅仅只有5个人给了礼钱

重庆一90岁老人去世,娘家来了46人吃席,仅仅只有5个人给了礼钱

匹夫来搞笑
2026-09-11 00:10:37
印度专家谈到中国时满脸不可置信:中国竟有50多个城市有地铁!

印度专家谈到中国时满脸不可置信:中国竟有50多个城市有地铁!

奇葩游戏酱
2026-09-09 07:06:57
因“女儿不找对象”夫妻高速上争吵 丈夫把妻子丢在高速路边 网友:有这样的父亲 难怪孩子不愿结婚

因“女儿不找对象”夫妻高速上争吵 丈夫把妻子丢在高速路边 网友:有这样的父亲 难怪孩子不愿结婚

闪电新闻
2026-09-10 19:17:33
欧美芯片巨头现在最怕的不是中国不买了,而是中国不光不买,还在自己造,而且造出来的东西,比他们卖给你的还便宜还好用

欧美芯片巨头现在最怕的不是中国不买了,而是中国不光不买,还在自己造,而且造出来的东西,比他们卖给你的还便宜还好用

扶苏聊历史
2026-09-10 15:31:39
39岁小法狂欢:欧冠首秀4-1 连挥3拳庆祝!短短3年疯狂跳级

39岁小法狂欢:欧冠首秀4-1 连挥3拳庆祝!短短3年疯狂跳级

叶青足球世界
2026-09-11 08:32:35
伊朗袭击美军基地,12架飞机损伤,照片来了

伊朗袭击美军基地,12架飞机损伤,照片来了

世家宝
2026-09-11 00:39:01
15.6万!日产新车官宣:9月23日,正式发布

15.6万!日产新车官宣:9月23日,正式发布

科技堡垒
2026-09-11 11:09:59
中方发邀请,上合4国同步进京,普京已看透,中国和俄罗斯不一样

中方发邀请,上合4国同步进京,普京已看透,中国和俄罗斯不一样

影孖看世界
2026-09-10 21:23:36
2-1击败前世界第1!中国女网16岁新星闪耀:看齐偶像郑钦文逆风翻盘

2-1击败前世界第1!中国女网16岁新星闪耀:看齐偶像郑钦文逆风翻盘

李喜林篮球绝杀
2026-09-10 11:21:28
2026年最强反腐来了!中纪委:害群之马将清除到底!

2026年最强反腐来了!中纪委:害群之马将清除到底!

细说职场
2026-09-10 15:44:52
9月1日房产新规:房产证写谁名字不重要,6条新规刷新认知!

9月1日房产新规:房产证写谁名字不重要,6条新规刷新认知!

你在偷看谁
2026-09-08 20:55:23
根据中方公布的消息,应印度总理莫迪邀请

根据中方公布的消息,应印度总理莫迪邀请

果妈聊娱乐
2026-09-11 10:06:00
山东临沂,30岁已婚男出轨18岁女孩,殴打数小时致人死亡被捕

山东临沂,30岁已婚男出轨18岁女孩,殴打数小时致人死亡被捕

欢姐说法
2026-09-11 11:15:03
“亮剑女神”童蕾现况,在浙江农家种地,拼命还清一亿四千万巨债

“亮剑女神”童蕾现况,在浙江农家种地,拼命还清一亿四千万巨债

文刀贰
2026-09-10 17:14:22
女地下党得知自己将被枪毙,突然开口:我可以招,但我要先见哥哥一面

女地下党得知自己将被枪毙,突然开口:我可以招,但我要先见哥哥一面

雍亲王府
2026-09-09 16:30:08
苹果官网更新iPhone 18系列和iPhone Duo国行售价

苹果官网更新iPhone 18系列和iPhone Duo国行售价

财闻
2026-09-10 02:41:45
小S大女儿Elly许曦文晒出海滩比基尼照,小S留言:“美是美,但1、2张不用先问妈妈吗?”

小S大女儿Elly许曦文晒出海滩比基尼照,小S留言:“美是美,但1、2张不用先问妈妈吗?”

韩小娱
2026-09-09 15:57:06
2026-09-11 11:51:00
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
325文章数 235关注度
往期回顾 全部

科技要闻

罗永浩连用7个“抄的”吐槽苹果折叠屏

头条要闻

复旦女硕士国外旅游时被蜱虫叮咬染重症 家属全网求助

头条要闻

复旦女硕士国外旅游时被蜱虫叮咬染重症 家属全网求助

体育要闻

16岁的国产小库里,还有多少功课要做

娱乐要闻

17岁拿下世界第一,还被亲妈吐槽?

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

买菜车也有小乐趣 风云T7不止是台合格家用SUV

态度原创

教育
房产
旅游
时尚
军事航空

教育要闻

2026胡润国际化学校百强出炉,深圳市南山区荟同学校登榜

房产要闻

时隔7年,绿地海南再拿地!

旅游要闻

挖到泰安隐秘绿野!现实版宫崎骏世界,这里简直是一座动画感草原

所以Luke更喜欢沙发,对吗?

军事要闻

中东“两线战火”同时升级

无障碍浏览 进入关怀版