网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
波音预测未来20年中国民航机队规模翻倍,需新增9240架飞机

波音预测未来20年中国民航机队规模翻倍,需新增9240架飞机

IT之家
2026-11-03 12:19:04
17分大逆转,勇士5连胜迎4大喜讯!1年285万淘到宝 库里可算熬出头

17分大逆转,勇士5连胜迎4大喜讯!1年285万淘到宝 库里可算熬出头

锅子篮球
2026-11-03 16:07:14
来了!苹果发布 iOS 27.3 重大新系统更新

来了!苹果发布 iOS 27.3 重大新系统更新

XCiOS俱乐部
2026-11-04 02:54:29
亚冠最新积分战报:北京国安被灌7球,上海海港征服客场,神户胜利船逆转险胜

亚冠最新积分战报:北京国安被灌7球,上海海港征服客场,神户胜利船逆转险胜

足球狗说
2026-11-03 22:23:16
媒体人:张宁对阿不都沙拉木的犯规动作非常不应该,他应该道歉

媒体人:张宁对阿不都沙拉木的犯规动作非常不应该,他应该道歉

狼叔评论
2026-11-04 00:52:04
贵州一男子分手后心生怨恨,潜入前女友与现任丈夫家中,在水桶、水壶、水瓶、酒桶、泡椒袋内、枕头下投放老鼠药和水银,法院判了

贵州一男子分手后心生怨恨,潜入前女友与现任丈夫家中,在水桶、水壶、水瓶、酒桶、泡椒袋内、枕头下投放老鼠药和水银,法院判了

扬子晚报
2026-11-03 12:41:55
早上几点起床才好?医生建议:过了68岁,起床尽量在这个时间点

早上几点起床才好?医生建议:过了68岁,起床尽量在这个时间点

华庭讲美食
2026-11-03 15:06:22
就徽剑遇害这事,网友们来了一个最终定性

就徽剑遇害这事,网友们来了一个最终定性

清晖有墨
2026-11-03 16:32:15
张宁再现脏动作!对阿不都使反关节致痛苦倒地,李根:伤人动作!

张宁再现脏动作!对阿不都使反关节致痛苦倒地,李根:伤人动作!

篮球资讯达人
2026-11-04 00:20:23
随着10人北京国安4-7,京都不死鸟0-0,亚冠精英赛最新积分榜出炉

随着10人北京国安4-7,京都不死鸟0-0,亚冠精英赛最新积分榜出炉

侧身凌空斩
2026-11-03 22:14:06
3分差距也敢说陪跑?皇马这一巴掌,扇醒多少“懂球帝”!

3分差距也敢说陪跑?皇马这一巴掌,扇醒多少“懂球帝”!

黄小仙的搞笑视频
2026-11-03 14:15:27
000333,已耗资近120亿元回购,将全部注销

000333,已耗资近120亿元回购,将全部注销

新浪财经
2026-11-03 19:46:59
梦见与异性发生关系,医生告诫:大都因为这4种原因,别傻傻不懂

梦见与异性发生关系,医生告诫:大都因为这4种原因,别傻傻不懂

路医生健康科普
2026-10-28 21:35:04
金融机构外汇存款准备金率提高到6%,专家:收紧境内美元流动性,缓解人民币升值压力

金融机构外汇存款准备金率提高到6%,专家:收紧境内美元流动性,缓解人民币升值压力

北青网-北京青年报
2026-11-03 16:00:02
朝中社:日本正快速变为战争国家

朝中社:日本正快速变为战争国家

新华社
2026-11-03 12:50:04
“好好学习吧,令爱的长相走不了这条路!”家长晒艺术照,心态崩了!

“好好学习吧,令爱的长相走不了这条路!”家长晒艺术照,心态崩了!

林林先生
2026-10-21 18:10:25
“不需要保住谁的饭碗”,曼联队长费尔南德斯回应主帅去留

“不需要保住谁的饭碗”,曼联队长费尔南德斯回应主帅去留

慢享生活集
2026-11-04 06:44:55
十月整治突如其来!无数舞女无路可走,熬到11月2日终于全面复业

十月整治突如其来!无数舞女无路可走,熬到11月2日终于全面复业

成都人的故事
2026-11-03 17:05:11
让二追三,10人曼联3-2大逆转罗马,库尼亚3分钟连入2球+染红

让二追三,10人曼联3-2大逆转罗马,库尼亚3分钟连入2球+染红

侧身凌空斩
2026-11-04 05:57:26
1948年砸开孔府内宅:烂成泥的鱼翅,和换了5000元救命粮的鸽子粪

1948年砸开孔府内宅:烂成泥的鱼翅,和换了5000元救命粮的鸽子粪

优趣纪史记
2026-11-02 08:33:27
2026-11-04 06:55:00
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
343文章数 235关注度
往期回顾 全部

科技要闻

马斯克也哭穷!Grok Bot额度暴跌

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

体育要闻

领意甲最低的工资,踢着最幸福的足球

娱乐要闻

巴图自曝已改姓后,英如嫡直播摊牌

财经要闻

巨额开支"难落地" 美国数据中心建设遇阻

汽车要闻

可油可甲醇/每公里成本2毛 银河星耀6EF焕新价7.68万起

态度原创

游戏
亲子
家居
房产
健康

《塞尔达时之笛RE》主动跳跃促使场景与地牢重审

亲子要闻

音乐一响,一岁半萌娃已准备出道!扭秧歌是刻在每个东北人DNA里的

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

地产投资下滑90%后,文昌突然大量卖地!

痘痘长到25岁还没完?查查内分泌

无障碍浏览 进入关怀版