网易首页 > 网易号 > 正文 申请入驻

一张图生成3D梦中情房,桌椅摆件随心换,又一世界生成模型来了

0
分享至


智东西
作者 杨京丽
编辑 李水青

智东西9月1日报道,今天,上海3D生成大模型公司影眸科技发布世界生成模型Hyper3D WorldGen,推动3D生成从“单个资产”走向“完整场景”

用户上传一张场景图片后,模型可以自动识别画面中的主要物体,并生成对应的3D资产,也支持手动框选目标生成,并通过影眸Hyper3D团队自研的CAST架构,重建物体之间的空间与物理关系,最终生成由多个独立、可编辑、可替换、可交互资产组成的3D场景。


CAST为“基于单张RGB图像的组件对齐式3D场景重建”,是影眸Hyper3D团队在2025年发布的场景级生成研究成果。其核心是从单张图片中补全被遮挡物体的三维结构,判断物体之间的接触、支撑、悬挂等关系,并将多个独立物体放入统一、物理合理的三维空间。该研究曾获SIGGRAPH 2025最佳论文。


值得注意的是,WorldGen的生成能力已经进入具身智能仿真训练、影视制作、游戏开发与XR等真实生产场景,推动场景级3D生成从视觉展示走向产业工作流。

模型发布前,智东西等媒体采访了影眸科技创始人、CEO吴迪和联合创始人、CTO张启煊,围绕WorldGen的技术路线、应用进展及3D生成行业趋势等问题进行了交流。

一、一张图片生成场景,场景内资产可交互

媒体交流会上,张启煊演示了WorldGen的生成过程:上传一张办公室盥洗室的图片后,系统能够自动识别水龙头、盘子、水果等主要物体,约2-3秒生成单个物体的3D预览,并在约2-3分钟内还原出完整场景。


这些物体都是可以被选择、移动和替换的独立资产。开启SimReady功能后,系统可以为资产估计出物体质量、大小和摩擦系数等物理属性,水果能够在力的作用下滚入水池中。


此外,用户还可以根据物体的重要程度选择不同的生成精度,先快速确定场景结构,再对重点资产进行精修。

吴迪举例称,如果用生成模型直接将会议室的图片转化为一个3D场景,画面中的桌椅、墙壁和其他物体通常会被合并在一起,难以单独选择和编辑。WorldGen在生成过程中能够拆分场景中的主要物体,分别生成独立资产,同时还原它们之间的空间与物理关系。

为了兼顾场景可用性与视觉完整性,WorldGen采用混合表达方式:需要编辑和交互的物体使用具备完整几何结构的网格模型(Mesh),方便后续调整和添加物理属性;背景则采用侧重还原场景外观的3D高斯泼溅(3D Gaussian Splatting),保留更多环境细节。


二、覆盖四类应用场景,具身智能、影视领域率先推进

张启煊向智东西介绍,WorldGen并非针对某个单一行业开发的模型,其应用场景覆盖具身智能、游戏、影视制作和XR等领域。目前,WorldGen已经在不同方向上推进落地应用。

在具身智能领域,影眸Hyper3D已与地瓜机器人、谋先飞展开合作,推出仿真训练方案:WorldGen负责生成可用于仿真的3D场景,谋先飞则进行仿真适配,地瓜机器人提供算力与开发工具链。

张启煊称:“生成式3D可以快速扩充物体种类和场景布局,但不会完全替代真实数据,机器人训练未来更可能混合使用仿真与真实数据。”


在影视领域,WorldGen能够解决视频模型在多镜头中难以保持空间和物体位置一致的问题。创作者可以先生成空间结构明确的3D场景,在其中调整镜头、移动物体和修改布局,再交给Seedance 2.5等视频模型补充人物表现、材质、光影和画面风格。


在游戏和专业3D制作领域,WorldGen生成的独立网格资产可以进入Blender、Unity、PlayCanvas和Unreal Engine等数字内容创作(DCC)工具及实时引擎,继续进行材质调整、动画绑定、关卡编辑和性能优化。今年7月,影眸Hyper3D还与Unity中国宣布合作,尝试打通从3D生成到实时游戏应用的流程。


在XR领域,WorldGen可以将参考图片还原为可编辑的三维空间,用户能够从不同视角观察场景,并调整物体和空间布局,可用于室内设计、空间展示和沉浸式体验。


张启煊告诉智东西,WorldGen在上述行业的应用目前主要处于内测或技术验证阶段,团队将根据实际客户需求确定后续投入重点。

三、以刚体生成为主,向“构建世界”继续演进

在采访交流环节,针对WorldGen技术边界的提问,张启煊称,系统生成的质量、摩擦系数等物理属性并非对真实物体的精确测量,主要结合资产体积、视觉信息、周围物体关系、传统估计算法以及视觉语言模型,对质量分布、摩擦系数和碰撞体进行推断。


因而,这些结果不能作为精密工程数据使用。现阶段,WorldGen主要支持刚体生成,尚未覆盖关节化资产、柔体和流体等。

关于WorldGen与“世界模型”的关系,吴迪称,世界模型既包括面向决策和行动的行动模型(Action Model),也包括生成可交互、可训练环境的模型,WorldGen更接近后者。影眸Hyper3D不会因此将自身定义为世界模型公司,其核心定位仍是3D生成。

吴迪认为,视频模型擅长最终画面呈现,3D则能够明确保存物体、空间结构和物理关系,两条路线并非相互取代,未来更可能以混合方式结合。

从单个资产走向完整场景,WorldGen让生成结果具备更强的可控性、可编辑性和工作流兼容能力。随着3D生成从“看起来好看”走向“真正可用”,场景级生成也正在成为连接游戏、影视、具身智能和XR等行业的新基础能力。

结语:3D生成竞争转向场景可用性

WorldGen的3D生成能力,并不只是局限于生成单个资产或是一个3D空间,它能够构建多个独立资产、理解空间关系与物理属性,形成可继续编辑、交互和运行的完整场景。3D生成的竞争重点正在从单个模型的视觉质量,进一步转向场景的可控性、物理合理性和工作流兼容能力。

现阶段,WorldGen仍以刚体生成为主,部分物理属性也依赖模型推断,在具身智能、游戏、影视和XR等领域仍处于验证与早期落地阶段。其后续价值能否真正释放,还要看生成结果能否稳定进入专业生产流程,但从“生成资产”走向“构建场景”,已经成为3D生成领域可行性较高的方案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
54岁柯蓝近况曝光,皱纹明显自然老,与黄志忠相伴多年,不婚不育

54岁柯蓝近况曝光,皱纹明显自然老,与黄志忠相伴多年,不婚不育

潋滟晴方DAY
2026-09-09 19:53:40
欧冠拜仁vs博德闪耀主裁判数据:近20场执法65黄、5红、4点球

欧冠拜仁vs博德闪耀主裁判数据:近20场执法65黄、5红、4点球

懂球帝
2026-09-10 04:34:03
70岁大爷相中55岁大妈,要求过夫妻生活,坦言他要享受快乐生活

70岁大爷相中55岁大妈,要求过夫妻生活,坦言他要享受快乐生活

小米拉
2026-09-09 08:04:17
手机涨价的闹剧:8天过山车,4499到5499再降价4399背后乱象!

手机涨价的闹剧:8天过山车,4499到5499再降价4399背后乱象!

时尚的弄潮
2026-09-09 05:51:06
碾压山东队!辽宁91-75完胜,顺利挺进4强,柳清瀚神勇,独砍22分

碾压山东队!辽宁91-75完胜,顺利挺进4强,柳清瀚神勇,独砍22分

萌兰聊个球
2026-09-09 16:03:45
炸裂,网传有六十多岁的高校老师把学生的肚子搞大了!

炸裂,网传有六十多岁的高校老师把学生的肚子搞大了!

黯泉
2026-09-09 23:50:30
印度宗教代表团参观埃菲尔铁塔要求女性“回避”,法国民间政界都坐不住了

印度宗教代表团参观埃菲尔铁塔要求女性“回避”,法国民间政界都坐不住了

澎湃新闻
2026-09-08 21:29:38
日本媒体透露,高市政府正商讨参加APEC峰会,想借此缓和中日关系

日本媒体透露,高市政府正商讨参加APEC峰会,想借此缓和中日关系

娱乐圈的笔娱君
2026-09-10 02:09:50
社保大厅排长队,不是抢着交钱,是人在算账

社保大厅排长队,不是抢着交钱,是人在算账

网络易不易
2026-09-09 06:10:21
男子网坛笑了!今年第二次迎来无“辛卡拉斯”的大满贯男单决赛

男子网坛笑了!今年第二次迎来无“辛卡拉斯”的大满贯男单决赛

体谈
2026-09-09 17:29:49
中科院:江浙沪血液有害物质浓度爆表!

中科院:江浙沪血液有害物质浓度爆表!

生命科学前沿
2024-03-27 17:38:51
如同灾难片!好莱坞巨星尼古拉斯·凯奇的豪宅塌陷

如同灾难片!好莱坞巨星尼古拉斯·凯奇的豪宅塌陷

大洛杉矶LA
2026-09-09 05:37:51
3-0!中国女足爆发,10分钟连入2球,越南队主帅:中国队更胜一筹

3-0!中国女足爆发,10分钟连入2球,越南队主帅:中国队更胜一筹

汪星人哟
2026-09-09 19:41:27
新一轮机关事业单位大清理 , 这6种人员将被辞退 , 多地重拳出击!

新一轮机关事业单位大清理 , 这6种人员将被辞退 , 多地重拳出击!

细说职场
2026-09-09 10:19:14
傅程鹏也没想到,自己狠心丢弃的儿子,如今15岁撕了他的体面

傅程鹏也没想到,自己狠心丢弃的儿子,如今15岁撕了他的体面

嘴角上翘的弧度
2026-09-08 10:43:02
如果不及时快速地解决台湾问题,有可能出现没法挽回的局面!

如果不及时快速地解决台湾问题,有可能出现没法挽回的局面!

乌克兰小静
2026-09-09 08:24:58
卡塔尔首相当面承诺,哪怕再苦再难,也要优先把油气卖给中国!

卡塔尔首相当面承诺,哪怕再苦再难,也要优先把油气卖给中国!

素衣读史
2026-09-10 04:08:33
破案了!千万粉丝网红董赤赤回应撞脸张熠薇,孩子不是自己生的

破案了!千万粉丝网红董赤赤回应撞脸张熠薇,孩子不是自己生的

喜欢历史的阿繁
2026-09-10 02:25:30
第一次见你:那不是相遇,是我在目光触及你时被重新校准的焦距

第一次见你:那不是相遇,是我在目光触及你时被重新校准的焦距

疾跑的小蜗牛
2026-08-26 19:28:38
37岁歌唱家龚爽私生活曝光,两个不良习惯,引人警醒

37岁歌唱家龚爽私生活曝光,两个不良习惯,引人警醒

吃青菜长高
2026-09-07 06:43:45
2026-09-10 04:52:49
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12574文章数 117167关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

苹果发布首款折叠屏iPhone Duo 起售价1999美元

头条要闻

苹果发布首款折叠屏iPhone Duo 起售价1999美元

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭德纲的商业版图,藏着不知道的真相

财经要闻

知情人士证实DeepSeek备战科创板IPO

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

时尚
数码
家居
健康
亲子

女人不管多大,都可以看看这些“条纹T恤”,非常减龄又简约

数码要闻

229元起:苹果为iPhone 18 Pro/Max、iPhone Duo上线多款配件

家居要闻

2026建博会(广州) 公装联探展交流活动

中风康复为何像“抽丝剥茧”?

亲子要闻

我不放弃,也不害怕!#彩虹糖裴曼伊#看看世界有多大#熊出没

无障碍浏览 进入关怀版