网易首页 > 网易号 > 正文 申请入驻

一张图生成3D梦中情房,桌椅摆件随心换,又一世界生成模型来了

0
分享至


智东西
作者 杨京丽
编辑 李水青

智东西9月1日报道,今天,上海3D生成大模型公司影眸科技发布世界生成模型Hyper3D WorldGen,推动3D生成从“单个资产”走向“完整场景”

用户上传一张场景图片后,模型可以自动识别画面中的主要物体,并生成对应的3D资产,也支持手动框选目标生成,并通过影眸Hyper3D团队自研的CAST架构,重建物体之间的空间与物理关系,最终生成由多个独立、可编辑、可替换、可交互资产组成的3D场景。


CAST为“基于单张RGB图像的组件对齐式3D场景重建”,是影眸Hyper3D团队在2025年发布的场景级生成研究成果。其核心是从单张图片中补全被遮挡物体的三维结构,判断物体之间的接触、支撑、悬挂等关系,并将多个独立物体放入统一、物理合理的三维空间。该研究曾获SIGGRAPH 2025最佳论文。


值得注意的是,WorldGen的生成能力已经进入具身智能仿真训练、影视制作、游戏开发与XR等真实生产场景,推动场景级3D生成从视觉展示走向产业工作流。

模型发布前,智东西等媒体采访了影眸科技创始人、CEO吴迪和联合创始人、CTO张启煊,围绕WorldGen的技术路线、应用进展及3D生成行业趋势等问题进行了交流。

一、一张图片生成场景,场景内资产可交互

媒体交流会上,张启煊演示了WorldGen的生成过程:上传一张办公室盥洗室的图片后,系统能够自动识别水龙头、盘子、水果等主要物体,约2-3秒生成单个物体的3D预览,并在约2-3分钟内还原出完整场景。


这些物体都是可以被选择、移动和替换的独立资产。开启SimReady功能后,系统可以为资产估计出物体质量、大小和摩擦系数等物理属性,水果能够在力的作用下滚入水池中。


此外,用户还可以根据物体的重要程度选择不同的生成精度,先快速确定场景结构,再对重点资产进行精修。

吴迪举例称,如果用生成模型直接将会议室的图片转化为一个3D场景,画面中的桌椅、墙壁和其他物体通常会被合并在一起,难以单独选择和编辑。WorldGen在生成过程中能够拆分场景中的主要物体,分别生成独立资产,同时还原它们之间的空间与物理关系。

为了兼顾场景可用性与视觉完整性,WorldGen采用混合表达方式:需要编辑和交互的物体使用具备完整几何结构的网格模型(Mesh),方便后续调整和添加物理属性;背景则采用侧重还原场景外观的3D高斯泼溅(3D Gaussian Splatting),保留更多环境细节。


二、覆盖四类应用场景,具身智能、影视领域率先推进

张启煊向智东西介绍,WorldGen并非针对某个单一行业开发的模型,其应用场景覆盖具身智能、游戏、影视制作和XR等领域。目前,WorldGen已经在不同方向上推进落地应用。

在具身智能领域,影眸Hyper3D已与地瓜机器人、谋先飞展开合作,推出仿真训练方案:WorldGen负责生成可用于仿真的3D场景,谋先飞则进行仿真适配,地瓜机器人提供算力与开发工具链。

张启煊称:“生成式3D可以快速扩充物体种类和场景布局,但不会完全替代真实数据,机器人训练未来更可能混合使用仿真与真实数据。”


在影视领域,WorldGen能够解决视频模型在多镜头中难以保持空间和物体位置一致的问题。创作者可以先生成空间结构明确的3D场景,在其中调整镜头、移动物体和修改布局,再交给Seedance 2.5等视频模型补充人物表现、材质、光影和画面风格。


在游戏和专业3D制作领域,WorldGen生成的独立网格资产可以进入Blender、Unity、PlayCanvas和Unreal Engine等数字内容创作(DCC)工具及实时引擎,继续进行材质调整、动画绑定、关卡编辑和性能优化。今年7月,影眸Hyper3D还与Unity中国宣布合作,尝试打通从3D生成到实时游戏应用的流程。


在XR领域,WorldGen可以将参考图片还原为可编辑的三维空间,用户能够从不同视角观察场景,并调整物体和空间布局,可用于室内设计、空间展示和沉浸式体验。


张启煊告诉智东西,WorldGen在上述行业的应用目前主要处于内测或技术验证阶段,团队将根据实际客户需求确定后续投入重点。

三、以刚体生成为主,向“构建世界”继续演进

在采访交流环节,针对WorldGen技术边界的提问,张启煊称,系统生成的质量、摩擦系数等物理属性并非对真实物体的精确测量,主要结合资产体积、视觉信息、周围物体关系、传统估计算法以及视觉语言模型,对质量分布、摩擦系数和碰撞体进行推断。


因而,这些结果不能作为精密工程数据使用。现阶段,WorldGen主要支持刚体生成,尚未覆盖关节化资产、柔体和流体等。

关于WorldGen与“世界模型”的关系,吴迪称,世界模型既包括面向决策和行动的行动模型(Action Model),也包括生成可交互、可训练环境的模型,WorldGen更接近后者。影眸Hyper3D不会因此将自身定义为世界模型公司,其核心定位仍是3D生成。

吴迪认为,视频模型擅长最终画面呈现,3D则能够明确保存物体、空间结构和物理关系,两条路线并非相互取代,未来更可能以混合方式结合。

从单个资产走向完整场景,WorldGen让生成结果具备更强的可控性、可编辑性和工作流兼容能力。随着3D生成从“看起来好看”走向“真正可用”,场景级生成也正在成为连接游戏、影视、具身智能和XR等行业的新基础能力。

结语:3D生成竞争转向场景可用性

WorldGen的3D生成能力,并不只是局限于生成单个资产或是一个3D空间,它能够构建多个独立资产、理解空间关系与物理属性,形成可继续编辑、交互和运行的完整场景。3D生成的竞争重点正在从单个模型的视觉质量,进一步转向场景的可控性、物理合理性和工作流兼容能力。

现阶段,WorldGen仍以刚体生成为主,部分物理属性也依赖模型推断,在具身智能、游戏、影视和XR等领域仍处于验证与早期落地阶段。其后续价值能否真正释放,还要看生成结果能否稳定进入专业生产流程,但从“生成资产”走向“构建场景”,已经成为3D生成领域可行性较高的方案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
《交锋》大结局:终极卧底曝光,锦兰真名叫余丽霞,是魏广进藏了整部剧的复仇王牌

《交锋》大结局:终极卧底曝光,锦兰真名叫余丽霞,是魏广进藏了整部剧的复仇王牌

肆季娱乐
2026-09-08 23:03:00
等不及俄罗斯倒下?美国或已完成对华的高级备战,台海仅是表面!

等不及俄罗斯倒下?美国或已完成对华的高级备战,台海仅是表面!

你是我的一个梦
2026-08-27 21:14:12
保利集团董事长贺平的人生颇具传奇色彩:他娶了邓小平的女儿为妻,还曾低调斥资3000万元收回三件国宝

保利集团董事长贺平的人生颇具传奇色彩:他娶了邓小平的女儿为妻,还曾低调斥资3000万元收回三件国宝

z千年历史老号
2026-09-07 11:43:45
15年前,那个当着全世界喝下核污染水的日本官员,如今还活着吗?

15年前,那个当着全世界喝下核污染水的日本官员,如今还活着吗?

墨兰史书
2026-02-09 23:08:35
你手欠过吗?网友:就因为一次手贱,毁了三个家庭!

你手欠过吗?网友:就因为一次手贱,毁了三个家庭!

另子维爱读史
2026-09-04 21:17:00
中国拜仁!成都蓉城11名国脚同时入选国家队:四川足球彻底崛起

中国拜仁!成都蓉城11名国脚同时入选国家队:四川足球彻底崛起

邱泽云
2026-09-08 20:37:43
国军将领随红军走完长征路后,重新回到国民党队伍,最终结局究竟如何?

国军将领随红军走完长征路后,重新回到国民党队伍,最终结局究竟如何?

翠羽
2026-09-09 15:50:07
东亚沦为全球生育洼地,害死生育率的不是房价,而是千年儒家悖论

东亚沦为全球生育洼地,害死生育率的不是房价,而是千年儒家悖论

尘世闲云
2026-09-09 03:46:13
你有洗屁股的习惯吗?医生提醒:天天洗肛门的人或能预防4种毛病

你有洗屁股的习惯吗?医生提醒:天天洗肛门的人或能预防4种毛病

芹姐说生活
2026-08-21 22:28:55
小米米家智能鱼缸2 Pro发售:31L容量,649元

小米米家智能鱼缸2 Pro发售:31L容量,649元

IT之家
2026-09-07 08:22:09
他的王朝存在190年,正史只赏了一篇传

他的王朝存在190年,正史只赏了一篇传

最爱历史
2026-09-09 14:40:02
奥沙利文官宣退出国锦赛!曾说不付钱就不参赛,有望在深圳赛回归

奥沙利文官宣退出国锦赛!曾说不付钱就不参赛,有望在深圳赛回归

排球黄金眼
2026-09-09 06:45:45
2026年!养老金调整主基调定了,看你能涨多少?

2026年!养老金调整主基调定了,看你能涨多少?

李云飞Afey
2026-08-08 14:52:50
破镜重圆复婚在即 张柏芝亲自证实 三个儿子都已经被谢霆锋接走

破镜重圆复婚在即 张柏芝亲自证实 三个儿子都已经被谢霆锋接走

星辰生肖馆
2025-03-22 05:10:03
白露后,丝瓜土豆靠边站,多吃这4菜,钾和钙含量高,好吃营养增免疫,不虚不乏精神足,应季还便宜

白露后,丝瓜土豆靠边站,多吃这4菜,钾和钙含量高,好吃营养增免疫,不虚不乏精神足,应季还便宜

小茉莉美食记
2026-09-08 05:15:06
iOS 26.6.2正式版推送!修了个"低级"Bug,却藏着iOS 27的大信号

iOS 26.6.2正式版推送!修了个"低级"Bug,却藏着iOS 27的大信号

泡泡网
2026-09-09 10:41:05
57位开国上将中,为何宋时轮争议最大,甚至被认为“过大于功”?

57位开国上将中,为何宋时轮争议最大,甚至被认为“过大于功”?

掠影后有感
2026-09-07 10:26:32
湖南长沙一非法代孕场所被查封,6名涉案人员被控制

湖南长沙一非法代孕场所被查封,6名涉案人员被控制

界面新闻
2026-09-09 18:36:43
4 岁男童父亲表现得很克制,否则事情不会是今天这个局面

4 岁男童父亲表现得很克制,否则事情不会是今天这个局面

老张侃诗词
2026-09-09 13:44:34
美国特使为乌克兰带来的“投降协议”细节曝光,乌克兰予以拒绝

美国特使为乌克兰带来的“投降协议”细节曝光,乌克兰予以拒绝

山河路口
2026-09-09 13:37:23
2026-09-10 02:55:00
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12574文章数 117167关注度
往期回顾 全部

科技要闻

AI重大突破!OpenAI称解开近百年数学难题

头条要闻

苹果发布首款折叠屏iPhone Duo 起售价1999美元

头条要闻

苹果发布首款折叠屏iPhone Duo 起售价1999美元

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭德纲的商业版图,藏着不知道的真相

财经要闻

知情人士证实DeepSeek备战科创板IPO

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

健康
本地
数码
家居
军事航空

中风康复为何像“抽丝剥茧”?

本地新闻

宁波,中国制造的隐藏大佬

数码要闻

国产显示科技惊艳欧洲!京东方IFA举办IPC,生态出海战略浮出水面

家居要闻

2026建博会(广州) 公装联探展交流活动

军事要闻

停止互袭首都3天后 俄乌猛烈交火

无障碍浏览 进入关怀版