网易首页 > 网易号 > 正文 申请入驻

视频版 GPT-Live 来了!事事有回应,时时它都在

0
分享至


视频版 GPT-Live 来了?

似乎,我们正在见证一个「长时、智能的AI互动娱乐基础设施」的诞生。

麦克卢汉说过,媒介真正塑造的,是「人类关联与行动的规模和形式」。

未来最成功最有代表性的公司或个体,很可能都将呈现同一种特征:一半媒体,一半机器;既生产产品,也生产现实。

从文本到语音,到视频,再到世界模型,AI正在从回答问题走向陪伴用户,以及用新交互创造新世界……


上面的这些感受,都来自于形界智能这次发布的 Genesis-1.0。

实时,持续互动,模型能在一个开放环境里不断理解我、回应我,还能维持住自己的状态。


官网:https://www.frame-x.ai/models/genesis

过去的AI产品,用户一次打开,是为了得到一个答案;

但在AI陪伴、虚拟人、直播互动等新场景里,用户正在逐渐进入更长时间、更高频的持续互动。

而这一切背后的模型基础设施,也在构建一个更精彩的沉浸式娱乐宇宙的雏形。

当我发现,可以像跟真人主播一样,在直播间实时互动,事情变得越来越有趣了……


01视频版 GPT-Live,非常有想象力

之前做过不少视频生成和数字人测评。

很多时候,生成的片段给我一种预制菜的感觉,像视频片段拼接起来的回应,缺少一个稳定世界。

Genesis-1.0 提出的新架构里,有一个点我很感兴趣。

它把规划层和感知渲染层解耦。

Genesis-1.0 具备视频双工能力,负责感知用户、渲染画面,实现极低的端到端角色行为延迟,包括动作和表情。

Genesis-1.0-Brain 则负责处理语言风格以及 MCP 调用等。

视频双工场景里,语言智能和视觉行为智能需要不同的优化路径。

Brain 处理内容、风格、工具调用,渲染层处理看和动。两者解耦,开发者更容易理解,也更容易接入。


基于新的视频双工架构,从数据和效果看,Genesis-1.0 已经在生成时长、响应速度、应用成本上达到业内领先的 Interactive Avatar 水准。

全身渲染支持;端到端画面延迟最佳 1.2 秒;最大生成时长是 24 小时。

效率和成本还能有很好的平衡,Pricing 是 0.003 美元每秒,行业平均价格在 0.006 美元每秒……

相比HeyGen LiveAvatar,Runway Avatar等上一代的数字人产品,我想说已经来到了新的竞争维度。


对于开发者来说,纸面参数还在其次,关键这是产品能不能成立的边界。

我在想,一个 AI 陪伴产品,如果每 5 分钟就要重启一次世界,用户体验会断。

一个虚拟人直播,如果响应超过 2 秒,互动感会明显下降。

同样,一个互动娱乐应用,如果成本压不下来,商业模型就跑不通。

Genesis-1.0 作为一个长时、智能的AI互动娱乐基础设施,已经悄悄把很多背后的技术支持做到了更好。

我之前的创业项目,意识永藏,是一个面向老年富豪群体的意识上传以及定制化陪伴,一度因为模型能力和配套设施的限制,在家族形象传承、数字人交互上,存在各种问题。

但现在,长时陪伴、类人交互,新的可能性因为Genesis-1.0重新打开了。

02新交互带来全新体验,类人交互有了行为闭环

类人的感觉,外表、静态视觉还在其次,行为才是关键。

体验下来给我的感觉是,Genesis 能感受到我的存在。

Genesis-1.0 同时具备主动感知与生成能力,支持和用户摄像头直接交互,并以极低的端到端延迟,实时反馈角色的行为。

很多数字人产品,它们能说话,能对口型和能做预设动作,但一旦打开摄像头,它们就露馅了。

这种交互本质上还是 Chatbot 加一层视频的皮。

真正的视频双工,需要模型持续看到用户,并把视觉理解直接转化为下一步行为。

Genesis-1.0 在视频双工场景中,展现出类人交互和端到端推理能力。

看起来是一个视频,其实背后包含了三个交互效果。

我说话时,它会思考,能互动打招呼、倾听,甚至还会模仿人:

聆听是感知,思考是推理,反馈是决策,表达是生成。

四个环节都要在极低延迟下完成。更低的的响应速度,放在这个闭环里,才有意义。

在我看来,这个能力会直接影响 AI 社交和陪伴产品的形态。

过去的 AI 陪伴更多是文字和语音,用户想象对方的形象。

视频双工加入后,用户直接看到一个角色,角色也直接看到用户。互动从语言扩展到表情、动作、视线和环境。产品设计空间会变大。

虚拟人直播可以实时回应观众动作。AI 陪伴可以感知用户情绪和状态。互动娱乐可以让用户成为场景的一部分。

这些场景都需要模型持续看到用户,并且把视觉理解转化为下一步行为。

0324h 形象不崩,视频双工有了长度的跃迁

24 小时,我觉得不只是生成时长变长。

过去实时视频生成,主要采用 Auto-Regressive 方式连续生成,模型以前序生成结果作为上下文,持续预测后续内容。

随着生成时间拉长,微小误差不断累积,最终会导致 IP 漂移和场景状态崩溃。

所以实时视频从分钟级走向长时生成,核心难题在于更长的时间尺度上保持世界状态稳定。

生成更多内容只是表面,真正难的是让模型始终知道世界现在是什么样,下一刻应该发生什么。


形界智能的Genesis-1.0,他们认为视频模型最终应该自己学会理解和维护世界状态。

不需要把世界拆成一套额外的 3D 表示,可以直接在视频表征中学习世界的结构、状态与变化规律。

这种统一的视频表征也更符合 Scaling 规律。

随着模型规模、数据规模和训练规模提升,模型可以持续学习更复杂的世界与交互,而无需同步扩张一套外部的结构化世界表示。

形界想走的路,是让视频模型自己在表征里学会世界状态。

Genesis-1.0 针对长时误差累积与生成一致性进行专项优化,将业界约 5 分钟级的互动时长,提升至稳定 24 小时。


因为长时生成最怕只看开头。开头漂亮没有意义,24 小时后的状态才说明问题。

人物身份是否一致,服装是否漂移,场景结构是否稳定,物理交互是否合理,行为逻辑是否连贯。这些才是世界状态稳定性的真实考题。

这让我想到长上下文 LLM 的能力演进。长上下文是在更长的历史中,依然能够正确理解当前状态并做出下一步判断。视频世界模型也是如此。

长时生成是在更长的时间里,始终知道世界现在是什么样,以及下一刻应该发生什么。

Genesis-1.0 让视频生成从生成一段内容,走向持续维护一个状态。

对于我们这些开发者、参与者,也意味着虚拟人直播、AI 陪伴、互动娱乐等产品,可以从每次生成一段内容,真正升级到一个角色持续存在。

新的关系感、养成感、陪伴感,体验也会得到大的升级。

04模型即产品,下一代 AI 社交与陪伴的基础设施

Model is Product 的时代,Genesis 本身就是一款高成熟度的产品。

不管是开发者还是普通玩家,拿到的不再只是一个视频生成能力,是一套全新的互动内容生产方式。

Genesis-1.0 把规划层和感知渲染层解耦,也是降低门槛的一部分。

Brain 处理问答内容、语言风格和 MCP 调用。

视频双工层负责感知用户、渲染画面,实现极低的端到端角色行为延迟。

开发者可以更灵活地接入自己的业务逻辑。需要工具调用,交给 Brain。


需要视觉交互,交给视频双工层。

需要长时稳定,交给 Genesis-1.0 的世界状态维护能力。

分工很精准也很实用。

背后的团队,年轻、快、务实、一直在向市场交付东西。

从产品到模型,都给我一种很有突破创新精神的感觉。

持续在场、持续感知、持续回应。

未来一两年,视频模型的竞争会从单次生成质量,转向持续互动质量。

谁能在一个更长的时间尺度上维持世界状态,谁能让角色持续存在,谁能以极低延迟理解用户并回应,谁就能拿到下一代互动娱乐和 AI 陪伴的入场券。

尼尔·波兹曼,Neil Postman,美国著名媒介理论家,《娱乐至死》的作者,长期在纽约大学研究媒介生态学。

他有一个极其重要的判断:技术变化不是叠加式的,而是生态式的。

他的意思是,一项新技术进入社会,并非在原来的世界上多加一个工具,它会把整个环境一起改掉。

Genesis-1.0 就在改变一整套环境,在构建一个新的AI原生的娱乐及陪伴生态。


官网:https://www.frame-x.ai/models/genesis

快去官网看一看!还有24小时无人在线的直播间,数字人主播全天侯陪你互动!

也许,这将是我们和AI深度关系的开始……


朋友圈会发一些具体的案例和商业化日常~

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
台“防长”顾立雄发表严正声明

台“防长”顾立雄发表严正声明

果妈聊娱乐
2026-10-28 08:25:16
上海一居民家中多次遭窃,竟然是自己给小偷留的“开门密码”!

上海一居民家中多次遭窃,竟然是自己给小偷留的“开门密码”!

匹夫来搞笑
2026-10-29 12:07:13
范德贝克29岁沦落西乙,赫罗纳主帅仍相信他的能力

范德贝克29岁沦落西乙,赫罗纳主帅仍相信他的能力

懂球帝
2026-10-30 06:34:15
“她不化妆,也比你好看!”女大学生跟室友比美,被网友喷崩溃了

“她不化妆,也比你好看!”女大学生跟室友比美,被网友喷崩溃了

妍妍教育日记
2026-10-28 21:52:06
舆论反转!张雪改装摩托水上滑行40.74公里,被质疑“没什么实际意义”,网友:你去查一下吉尼斯世界纪录,挑战都有实用意义吗

舆论反转!张雪改装摩托水上滑行40.74公里,被质疑“没什么实际意义”,网友:你去查一下吉尼斯世界纪录,挑战都有实用意义吗

火山詩话
2026-10-27 07:07:41
北控51分狂胜送四川4连败:沈梓捷总篮板超刘炜 霍华德31分

北控51分狂胜送四川4连败:沈梓捷总篮板超刘炜 霍华德31分

醉卧浮生
2026-10-29 18:13:54
没人敢承认的真相:70后退场,才是时代最彻底的分水岭

没人敢承认的真相:70后退场,才是时代最彻底的分水岭

笑熬浆糊111
2026-10-21 08:01:04
已故演员高秀敏、张少华被印上祭祀用品涉事地疑为吉林德惠,当地民政局表示将进行核查

已故演员高秀敏、张少华被印上祭祀用品涉事地疑为吉林德惠,当地民政局表示将进行核查

台州交通广播
2026-10-30 02:04:00
暴跌149.75%亏损6211万,库存几乎翻番!电驴界爱马仕卖不动了?

暴跌149.75%亏损6211万,库存几乎翻番!电驴界爱马仕卖不动了?

老慃尾声体育解说
2026-10-28 21:11:38
一查才明白,这名曾在莫斯科大学课堂上身披旭日旗的南京留学生,竟然也跻身俄罗斯最有分量的人文平台之一

一查才明白,这名曾在莫斯科大学课堂上身披旭日旗的南京留学生,竟然也跻身俄罗斯最有分量的人文平台之一

z千年历史老号
2026-10-22 16:20:38
帝豪2026款非鲨150上市 售价0.678万元起

帝豪2026款非鲨150上市 售价0.678万元起

车质网
2026-10-29 12:55:07
闹大了,小小徐婚礼来了上万人,恐超呆呆杀猪宴,文旅消防全出动

闹大了,小小徐婚礼来了上万人,恐超呆呆杀猪宴,文旅消防全出动

一个小豹子
2026-10-30 03:27:10
我们赢了,中国女足点球淘汰法国,马晓旭带队创U17世界杯历史

我们赢了,中国女足点球淘汰法国,马晓旭带队创U17世界杯历史

南海浪花
2026-10-30 03:16:53
杀疯了!杨幂刘学义16cm神仙身高差火出圈,新剧同框氛围直接封神

杀疯了!杨幂刘学义16cm神仙身高差火出圈,新剧同框氛围直接封神

手工制作阿歼
2026-10-29 17:43:11
随着广东82-80绝杀,产生3大不争事实,不是胡明轩 最大功臣是他!

随着广东82-80绝杀,产生3大不争事实,不是胡明轩 最大功臣是他!

林子说事
2026-10-30 00:27:14
中金公司跌停

中金公司跌停

财闻
2026-10-29 15:15:44
南京新百户外飞天梯进入收尾阶段,新街口商圈迎来空中新动线

南京新百户外飞天梯进入收尾阶段,新街口商圈迎来空中新动线

现代快报
2026-10-29 22:15:37
蔡磊妻子段睿被问到“假如蔡磊渐冻症康复”,落泪表示“会对他说我好累啊,我不干了”

蔡磊妻子段睿被问到“假如蔡磊渐冻症康复”,落泪表示“会对他说我好累啊,我不干了”

黄河新闻网吕梁
2026-10-29 09:59:30
网红小姐姐这身通勤OL穿搭,确实很吸引人

网红小姐姐这身通勤OL穿搭,确实很吸引人

美女穿搭分享
2026-10-24 11:19:10
三婶当着亲戚面嘲讽我生不出儿子,我没哭没闹,转头问三婶:婶子,你家那三个儿子,现在哪个管你?

三婶当着亲戚面嘲讽我生不出儿子,我没哭没闹,转头问三婶:婶子,你家那三个儿子,现在哪个管你?

麦子情感故事
2026-10-29 16:00:06
2026-10-30 06:56:49
AI异类 incentive-icons
AI异类
从硅谷到中关村,AI信息与测评
281文章数 11关注度
往期回顾 全部

科技要闻

MacBook终于能触屏了:22999元起

头条要闻

女子一口气买500000元的超市卡 店员立即报警

头条要闻

女子一口气买500000元的超市卡 店员立即报警

体育要闻

超级黑马!球队不败 29岁的他得分榜前三

娱乐要闻

白百何被曝和二婚丈夫离婚 和男生逛街

财经要闻

两大娱乐巨头,谈崩了

汽车要闻

标配宁德时代电池 智己LS8 NEO纯电预售24.98万起

态度原创

数码
亲子
家居
公开课
军事航空

数码要闻

MacBook Pro首次支持触控!苹果新品又来了

亲子要闻

育见未来丨科学守护儿童营养,专家共议行业良性发展

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

万斯致信伊朗安全高官试图重启谈判

无障碍浏览 进入关怀版