网易首页 > 网易号 > 正文 申请入驻

视频版 GPT-Live 来了!事事有回应,时时它都在

0
分享至


视频版 GPT-Live 来了?

似乎,我们正在见证一个「长时、智能的AI互动娱乐基础设施」的诞生。

麦克卢汉说过,媒介真正塑造的,是「人类关联与行动的规模和形式」。

未来最成功最有代表性的公司或个体,很可能都将呈现同一种特征:一半媒体,一半机器;既生产产品,也生产现实。

从文本到语音,到视频,再到世界模型,AI正在从回答问题走向陪伴用户,以及用新交互创造新世界……


上面的这些感受,都来自于形界智能这次发布的 Genesis-1.0。

实时,持续互动,模型能在一个开放环境里不断理解我、回应我,还能维持住自己的状态。


官网:https://www.frame-x.ai/models/genesis

过去的AI产品,用户一次打开,是为了得到一个答案;

但在AI陪伴、虚拟人、直播互动等新场景里,用户正在逐渐进入更长时间、更高频的持续互动。

而这一切背后的模型基础设施,也在构建一个更精彩的沉浸式娱乐宇宙的雏形。

当我发现,可以像跟真人主播一样,在直播间实时互动,事情变得越来越有趣了……


01视频版 GPT-Live,非常有想象力

之前做过不少视频生成和数字人测评。

很多时候,生成的片段给我一种预制菜的感觉,像视频片段拼接起来的回应,缺少一个稳定世界。

Genesis-1.0 提出的新架构里,有一个点我很感兴趣。

它把规划层和感知渲染层解耦。

Genesis-1.0 具备视频双工能力,负责感知用户、渲染画面,实现极低的端到端角色行为延迟,包括动作和表情。

Genesis-1.0-Brain 则负责处理语言风格以及 MCP 调用等。

视频双工场景里,语言智能和视觉行为智能需要不同的优化路径。

Brain 处理内容、风格、工具调用,渲染层处理看和动。两者解耦,开发者更容易理解,也更容易接入。


基于新的视频双工架构,从数据和效果看,Genesis-1.0 已经在生成时长、响应速度、应用成本上达到业内领先的 Interactive Avatar 水准。

全身渲染支持;端到端画面延迟最佳 1.2 秒;最大生成时长是 24 小时。

效率和成本还能有很好的平衡,Pricing 是 0.003 美元每秒,行业平均价格在 0.006 美元每秒……

相比HeyGen LiveAvatar,Runway Avatar等上一代的数字人产品,我想说已经来到了新的竞争维度。


对于开发者来说,纸面参数还在其次,关键这是产品能不能成立的边界。

我在想,一个 AI 陪伴产品,如果每 5 分钟就要重启一次世界,用户体验会断。

一个虚拟人直播,如果响应超过 2 秒,互动感会明显下降。

同样,一个互动娱乐应用,如果成本压不下来,商业模型就跑不通。

Genesis-1.0 作为一个长时、智能的AI互动娱乐基础设施,已经悄悄把很多背后的技术支持做到了更好。

我之前的创业项目,意识永藏,是一个面向老年富豪群体的意识上传以及定制化陪伴,一度因为模型能力和配套设施的限制,在家族形象传承、数字人交互上,存在各种问题。

但现在,长时陪伴、类人交互,新的可能性因为Genesis-1.0重新打开了。

02新交互带来全新体验,类人交互有了行为闭环

类人的感觉,外表、静态视觉还在其次,行为才是关键。

体验下来给我的感觉是,Genesis 能感受到我的存在。

Genesis-1.0 同时具备主动感知与生成能力,支持和用户摄像头直接交互,并以极低的端到端延迟,实时反馈角色的行为。

很多数字人产品,它们能说话,能对口型和能做预设动作,但一旦打开摄像头,它们就露馅了。

这种交互本质上还是 Chatbot 加一层视频的皮。

真正的视频双工,需要模型持续看到用户,并把视觉理解直接转化为下一步行为。

Genesis-1.0 在视频双工场景中,展现出类人交互和端到端推理能力。

看起来是一个视频,其实背后包含了三个交互效果。

我说话时,它会思考,能互动打招呼、倾听,甚至还会模仿人:

聆听是感知,思考是推理,反馈是决策,表达是生成。

四个环节都要在极低延迟下完成。更低的的响应速度,放在这个闭环里,才有意义。

在我看来,这个能力会直接影响 AI 社交和陪伴产品的形态。

过去的 AI 陪伴更多是文字和语音,用户想象对方的形象。

视频双工加入后,用户直接看到一个角色,角色也直接看到用户。互动从语言扩展到表情、动作、视线和环境。产品设计空间会变大。

虚拟人直播可以实时回应观众动作。AI 陪伴可以感知用户情绪和状态。互动娱乐可以让用户成为场景的一部分。

这些场景都需要模型持续看到用户,并且把视觉理解转化为下一步行为。

0324h 形象不崩,视频双工有了长度的跃迁

24 小时,我觉得不只是生成时长变长。

过去实时视频生成,主要采用 Auto-Regressive 方式连续生成,模型以前序生成结果作为上下文,持续预测后续内容。

随着生成时间拉长,微小误差不断累积,最终会导致 IP 漂移和场景状态崩溃。

所以实时视频从分钟级走向长时生成,核心难题在于更长的时间尺度上保持世界状态稳定。

生成更多内容只是表面,真正难的是让模型始终知道世界现在是什么样,下一刻应该发生什么。


形界智能的Genesis-1.0,他们认为视频模型最终应该自己学会理解和维护世界状态。

不需要把世界拆成一套额外的 3D 表示,可以直接在视频表征中学习世界的结构、状态与变化规律。

这种统一的视频表征也更符合 Scaling 规律。

随着模型规模、数据规模和训练规模提升,模型可以持续学习更复杂的世界与交互,而无需同步扩张一套外部的结构化世界表示。

形界想走的路,是让视频模型自己在表征里学会世界状态。

Genesis-1.0 针对长时误差累积与生成一致性进行专项优化,将业界约 5 分钟级的互动时长,提升至稳定 24 小时。


因为长时生成最怕只看开头。开头漂亮没有意义,24 小时后的状态才说明问题。

人物身份是否一致,服装是否漂移,场景结构是否稳定,物理交互是否合理,行为逻辑是否连贯。这些才是世界状态稳定性的真实考题。

这让我想到长上下文 LLM 的能力演进。长上下文是在更长的历史中,依然能够正确理解当前状态并做出下一步判断。视频世界模型也是如此。

长时生成是在更长的时间里,始终知道世界现在是什么样,以及下一刻应该发生什么。

Genesis-1.0 让视频生成从生成一段内容,走向持续维护一个状态。

对于我们这些开发者、参与者,也意味着虚拟人直播、AI 陪伴、互动娱乐等产品,可以从每次生成一段内容,真正升级到一个角色持续存在。

新的关系感、养成感、陪伴感,体验也会得到大的升级。

04模型即产品,下一代 AI 社交与陪伴的基础设施

Model is Product 的时代,Genesis 本身就是一款高成熟度的产品。

不管是开发者还是普通玩家,拿到的不再只是一个视频生成能力,是一套全新的互动内容生产方式。

Genesis-1.0 把规划层和感知渲染层解耦,也是降低门槛的一部分。

Brain 处理问答内容、语言风格和 MCP 调用。

视频双工层负责感知用户、渲染画面,实现极低的端到端角色行为延迟。

开发者可以更灵活地接入自己的业务逻辑。需要工具调用,交给 Brain。


需要视觉交互,交给视频双工层。

需要长时稳定,交给 Genesis-1.0 的世界状态维护能力。

分工很精准也很实用。

背后的团队,年轻、快、务实、一直在向市场交付东西。

从产品到模型,都给我一种很有突破创新精神的感觉。

持续在场、持续感知、持续回应。

未来一两年,视频模型的竞争会从单次生成质量,转向持续互动质量。

谁能在一个更长的时间尺度上维持世界状态,谁能让角色持续存在,谁能以极低延迟理解用户并回应,谁就能拿到下一代互动娱乐和 AI 陪伴的入场券。

尼尔·波兹曼,Neil Postman,美国著名媒介理论家,《娱乐至死》的作者,长期在纽约大学研究媒介生态学。

他有一个极其重要的判断:技术变化不是叠加式的,而是生态式的。

他的意思是,一项新技术进入社会,并非在原来的世界上多加一个工具,它会把整个环境一起改掉。

Genesis-1.0 就在改变一整套环境,在构建一个新的AI原生的娱乐及陪伴生态。


官网:https://www.frame-x.ai/models/genesis

快去官网看一看!还有24小时无人在线的直播间,数字人主播全天侯陪你互动!

也许,这将是我们和AI深度关系的开始……


朋友圈会发一些具体的案例和商业化日常~

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
各国元首任期分别是多少年?不同国家的任期规定有何不同?一篇文章看懂各国任期区别

各国元首任期分别是多少年?不同国家的任期规定有何不同?一篇文章看懂各国任期区别

z千年历史老号
2026-10-08 18:09:35
战争爆发前的预兆出现!美国已经有4个征兆,张召忠预言要成真?

战争爆发前的预兆出现!美国已经有4个征兆,张召忠预言要成真?

画卷
2026-10-08 19:17:31
若美国入侵中国,打败中国需要几个小时?DeepSeek给出精准分析

若美国入侵中国,打败中国需要几个小时?DeepSeek给出精准分析

花漾夜雨飘雪
2026-10-28 06:25:13
彻底露底!印度成立大刀队冲上中印前线,边境总司令当众叫板莫迪

彻底露底!印度成立大刀队冲上中印前线,边境总司令当众叫板莫迪

史之韵
2026-10-27 20:20:25
晋级16强不到24小时,央视“点名”孙颖莎,句句给王曼昱提了醒

晋级16强不到24小时,央视“点名”孙颖莎,句句给王曼昱提了醒

勇敢的人享受生活
2026-10-29 08:12:46
全民“不入套”:一场底层发起的无声变局,正在颠覆旧有社会规则

全民“不入套”:一场底层发起的无声变局,正在颠覆旧有社会规则

华庭讲美食
2026-10-15 01:39:37
撒尿牛丸全是鸡肉!工厂用鸡骨架打泥做肉丸

撒尿牛丸全是鸡肉!工厂用鸡骨架打泥做肉丸

看看新闻Knews
2026-10-28 17:51:47
逐渐找到状态了!锋线老将在掘金也开始适应替补的角色了?

逐渐找到状态了!锋线老将在掘金也开始适应替补的角色了?

稻谷与小麦
2026-10-30 00:42:00
普京一改强硬姿态,定下新目标:俄乌都好,才是真正的和平

普京一改强硬姿态,定下新目标:俄乌都好,才是真正的和平

小马姨
2026-10-28 18:18:59
《哪吒2》“封神”之后,光线传媒净利暴跌98%

《哪吒2》“封神”之后,光线传媒净利暴跌98%

野马财经
2026-10-29 21:47:02
一名入伍才三个月的俄军逃兵,在乌东村落枪杀了五名熟睡的乌军无人机操作员,得手后端着枪一头扎进了乌克兰控制的百万人口大城市

一名入伍才三个月的俄军逃兵,在乌东村落枪杀了五名熟睡的乌军无人机操作员,得手后端着枪一头扎进了乌克兰控制的百万人口大城市

扶苏聊历史
2026-10-26 11:49:51
有其父必有其子,政商旋转门轰然崩塌:黄然非同步被带走调查

有其父必有其子,政商旋转门轰然崩塌:黄然非同步被带走调查

十为先生
2026-10-27 18:06:42
梅西累积5张黄牌,却不用停赛!还获得美职联奖励:自动减少至2黄

梅西累积5张黄牌,却不用停赛!还获得美职联奖励:自动减少至2黄

小火箭爱体育
2026-10-29 16:32:52
奔驰新车上市:10月29日正式开售,59.90万元

奔驰新车上市:10月29日正式开售,59.90万元

科技阿维
2026-10-29 22:37:56
黄景瑜案子判了,判的还不轻,家暴、和迪丽热巴结婚早真相大白

黄景瑜案子判了,判的还不轻,家暴、和迪丽热巴结婚早真相大白

林轻吟
2026-10-27 16:35:08
赚国人的钱,嫌中文掉价?车企开发布会狂拽英文站台,崇洋媚外!

赚国人的钱,嫌中文掉价?车企开发布会狂拽英文站台,崇洋媚外!

晓肂爱八卦
2026-10-28 12:45:31
桂林七星岩惨案:823条生命瞬间消逝,这段历史我们不能忘

桂林七星岩惨案:823条生命瞬间消逝,这段历史我们不能忘

小豫讲故事
2026-10-28 06:00:19
亚冠二G组积分榜:町田三连胜领跑,申花净胜球劣势第3,淡滨尼垫底

亚冠二G组积分榜:町田三连胜领跑,申花净胜球劣势第3,淡滨尼垫底

懂球帝
2026-10-29 22:22:06
中山一医院停诊,有患者购买千元医疗服务,服务尚未完成

中山一医院停诊,有患者购买千元医疗服务,服务尚未完成

南方都市报
2026-10-29 20:20:27
总统办公室主任:俄罗斯国防工业设施必须为乌克兰的每一个受害者焚烧

总统办公室主任:俄罗斯国防工业设施必须为乌克兰的每一个受害者焚烧

桂系007
2026-10-29 23:59:45
2026-10-30 00:55:00
AI异类 incentive-icons
AI异类
从硅谷到中关村,AI信息与测评
281文章数 11关注度
往期回顾 全部

科技要闻

MacBook终于能触屏了:22999元起

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

头条要闻

媒体:守住不该守住的底盘 77岁的内塔尼亚胡逃出生天

体育要闻

超级黑马!球队不败 29岁的他得分榜前三

娱乐要闻

白百何被曝和二婚丈夫离婚 和男生逛街

财经要闻

两大娱乐巨头,谈崩了

汽车要闻

标配宁德时代电池 智己LS8 NEO纯电预售24.98万起

态度原创

亲子
数码
家居
公开课
军事航空

亲子要闻

这水是一点不浪费

数码要闻

创维2026秋季全场景发布会:多款新品亮相,AI加速融入家庭生活

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

万斯致信伊朗安全高官试图重启谈判

无障碍浏览 进入关怀版