网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
血亏!皇马 1.4 亿队史标王彻底废了!穆里尼奥不敢用了

血亏!皇马 1.4 亿队史标王彻底废了!穆里尼奥不敢用了

奶盖熊本熊
2026-09-11 07:39:56
 李大钊的藏身地固若金汤,把他供出来的不是敌人,而是他最信任的人

 李大钊的藏身地固若金汤,把他供出来的不是敌人,而是他最信任的人

磊子讲史
2026-09-10 17:11:14
快船反击!美国司法部介入!伦纳德被刑事调查

快船反击!美国司法部介入!伦纳德被刑事调查

篮球教学论坛
2026-09-11 09:31:53
埃及知名女主播获判绞刑!锦衣玉食的她当庭崩溃:我连烟都没碰过

埃及知名女主播获判绞刑!锦衣玉食的她当庭崩溃:我连烟都没碰过

冰语历史
2026-09-10 18:33:47
3-0!3-0!澳门冠军赛:8强诞生!张本智和剃光头,美和打疯了!

3-0!3-0!澳门冠军赛:8强诞生!张本智和剃光头,美和打疯了!

kio鱼
2026-09-11 00:16:11
两地同日迎来新任代市长

两地同日迎来新任代市长

上观新闻
2026-09-10 14:18:25
上任仅3个月!65岁欧冠队主帅愤怒辞职 逼平罗马后遭球迷瓶子砸头

上任仅3个月!65岁欧冠队主帅愤怒辞职 逼平罗马后遭球迷瓶子砸头

我爱英超
2026-09-11 06:29:42
特朗普称如果伊朗拥有核武器,我会给最高领袖打电话,对他说:“最高领袖先生,您好吗?有什么能为您效劳的吗?”

特朗普称如果伊朗拥有核武器,我会给最高领袖打电话,对他说:“最高领袖先生,您好吗?有什么能为您效劳的吗?”

鲁中晨报
2026-09-11 07:07:15
苹果折叠屏一出来,全世界突然变了一个模样

苹果折叠屏一出来,全世界突然变了一个模样

大白聊IT
2026-09-11 00:50:56
iPhone 18 Pro Max全球价格对比,国行到底贵不贵

iPhone 18 Pro Max全球价格对比,国行到底贵不贵

搞机小帝
2026-09-10 18:30:59
真的佩服我老公!不抽烟、不喝酒、不打牌,唯一的爱好就是看美女

真的佩服我老公!不抽烟、不喝酒、不打牌,唯一的爱好就是看美女

千秋文化
2026-09-10 20:12:18
女性长期使用情趣用品,身体可能出现哪些不适?不少人缺乏认知

女性长期使用情趣用品,身体可能出现哪些不适?不少人缺乏认知

看世界的人
2026-08-07 09:22:50
久违合体!李连杰携家人拜见仁波切,64 岁利智颜值回春气质依旧

久违合体!李连杰携家人拜见仁波切,64 岁利智颜值回春气质依旧

乡野异闻录
2026-09-11 11:43:17
偶遇曾经发生过关系的异性,会冲动吗?网友:如果女方越来越漂亮,男的还会释然吗

偶遇曾经发生过关系的异性,会冲动吗?网友:如果女方越来越漂亮,男的还会释然吗

带你感受人间冷暖
2026-09-11 00:05:28
江西台记者采访遭掌掴,中国记协:正当采访权利必须维护

江西台记者采访遭掌掴,中国记协:正当采访权利必须维护

新京报
2026-09-11 09:33:20
不订学生奶就得站着喝水?武汉一家长质疑班主任区别对待,教育局回应

不订学生奶就得站着喝水?武汉一家长质疑班主任区别对待,教育局回应

扬子晚报
2026-09-10 18:59:13
苹果突然官宣:9月11日,iPhone17Pro抵扣价6400元

苹果突然官宣:9月11日,iPhone17Pro抵扣价6400元

搞机小帝
2026-09-11 10:53:02
比伊朗更勇猛!48小时连炸沙特四座城市,终于懂美军为何不敢开战

比伊朗更勇猛!48小时连炸沙特四座城市,终于懂美军为何不敢开战

揽星戈
2026-09-10 09:14:36
已破案!员工裸奔涉事上市公司出来认领了

已破案!员工裸奔涉事上市公司出来认领了

财通社
2026-09-10 20:51:58
叛逆期沙溢儿子终于肯剪头发!剪完长相大变不敢认,秒变东北宋仲基

叛逆期沙溢儿子终于肯剪头发!剪完长相大变不敢认,秒变东北宋仲基

八卦王者
2026-09-11 10:46:34
2026-09-11 12:43:00
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
325文章数 235关注度
往期回顾 全部

科技要闻

罗永浩连用7个“抄的”吐槽苹果折叠屏

头条要闻

男子投150万加盟火锅自助店4个多月赔光 首月就赔20万

头条要闻

男子投150万加盟火锅自助店4个多月赔光 首月就赔20万

体育要闻

37岁还能场场进球,还能翻跟头!

娱乐要闻

17岁拿下世界第一,还被亲妈吐槽?

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

买菜车也有小乐趣 风云T7不止是台合格家用SUV

态度原创

房产
亲子
旅游
家居
公开课

房产要闻

时隔7年,绿地海南再拿地!

亲子要闻

强烈建议:有娃家庭,周末固定80%的动作

旅游要闻

“中国峡谷临水第一路” 四川金口河大峡谷水上公路入选“最美水上公路”

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版