网易首页 > 网易号 > 正文 申请入驻

视频生成不用等渲染了?实时直播场景,4K输出还能边播边改

0
分享至

视频生成模型又卷出新花样了。这次不是生成一段视频等几分钟渲染,而是像直播一样,边生成边更新画面。

Visko 今天发布了 Orbis 1.0,官方称之为他们的第一个"Live Model"(实时模型)。核心能力一句话概括:实时生成一个场景,并且在新提示词进来时,持续更新画面,不需要重启整个生成流程。每次更新都会自然叠加到正在生成的场景中,像直播一样流畅。


这跟传统视频生成模型有本质区别。以前你输入一段提示词,模型吭哧吭哧生成几秒到几十秒的视频,不满意?改提示词,重新生成,等。Orbis 的做法是:场景一直在生成中,你随时丢新指令进去,画面直接跟着变,不用从头再来。

测试数据:74个测试用例,每个1-3分钟,每个包含6次提示词变更。技术报告显示,Orbis 在感知质量、运动质量和提示词对齐度上,领先于其他实时系统,包括 LongLive、Self-Forcing 和 SANA-Video。

这组数字说明什么?说明它不是为了炫技做的演示,而是真的在"持续生成"这个方向上做了系统性的工程优化。

输入输出规格

输入方面,Orbis 支持三种起点:

  • 文本提示词
  • 图片
  • 现有视频

输出方面,支持 4K 分辨率、24 FPS。这个规格放在实时生成这个前提下,算得上硬核了——毕竟很多非实时的模型,生成4K视频也要等不少时间。

更关键的是跨会话的一致性。测试中,Orbis 能在不同会话之间保持主体、场景和风格稳定。这意味着你上午生成一个角色,下午继续生成,它还是那个角色,不会变成另一个人。这对做长视频、做连续剧情的创作者来说,是刚需功能。

"持久记忆"和"物理接地"

官方介绍里有两个词值得注意:persistent memory(持久记忆)和 physics-grounded generation(物理接地生成)。

持久记忆解决的是上面说的跨会话一致性问题。物理接地则是说,生成的内容要符合物理规律——物体不会凭空消失,运动轨迹不会违反直觉。这两个特性叠加,加上"无界长度"(unbounded length)的生成能力,官方给的使用场景是"创建活的世界并实时流式传输"。

翻译一下:你可以用它做实时直播的虚拟场景,也可以做游戏里的动态背景,甚至做电影预演(previs)——场景不是预先渲染好的,而是实时生成的,随时可以改。

API 已开放

Orbis 1.0 现在已经在 visko.ai/models#orbis 上线,可以试用。API 通过 reactorworld 提供。这意味着开发者可以直接把实时视频生成能力接进自己的应用里,不用自己训练模型。

从产品定位来看,Visko 瞄准的不是"生成一段视频"这个旧需求,而是"持续生成一个世界"这个新需求。前者是单次请求-响应,后者是长连接-持续流。这个转变,跟当年从"下载文件"到"在线流媒体"的转变有点像。

跟其他实时系统的对比

技术报告里提到的对比对象——LongLive、Self-Forcing、SANA-Video——都是学术界和工业界在实时视频生成方向上的代表系统。Orbis 能在这些系统里领先,说明它的架构不是简单堆算力,而是在生成机制上做了创新。

不过,报告只提到了"领先",具体领先多少、在哪些细分维度上有优势,原文没有展开。对于想深入了解的人来说,可能需要去看完整的技术报告。

吐槽两句

说实话,"实时生成+持续更新"这个方向,之前不是没人提过,但大多数产品停留在演示阶段——生成几秒钟的短视频,然后告诉你"这是实时的"。Orbis 这次至少把规格拉到了4K/24FPS,还做了74个测试用例的系统性评估,看起来是认真在做产品,不是发个论文就完事。

但也要泼盆冷水:"无界长度"和"持久记忆"这两个词,在视频生成领域已经被用滥了。很多模型号称无限长,实际生成到一定长度就开始崩坏——主体变形、场景漂移、风格突变。Orbis 的测试用例最长只有3分钟,这个长度能不能撑住"无界"的承诺,还得看实际使用中的表现。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
虚空问责的星宇股份,突然冒出了个帮凶

虚空问责的星宇股份,突然冒出了个帮凶

人格志
2026-09-03 17:40:50
安踏,快被自己养大的“小弟”挤下主位了!

安踏,快被自己养大的“小弟”挤下主位了!

可乐爱微笑
2026-09-03 22:56:06
任开斌,已任辽宁省政府党组成员

任开斌,已任辽宁省政府党组成员

政知新媒体
2026-09-04 08:43:10
不敢征税,只能哄富人花钱?中国内需困局,被经济学家一语戳穿

不敢征税,只能哄富人花钱?中国内需困局,被经济学家一语戳穿

说故事的阿袭
2026-09-04 06:50:18
开车的注意了!你的车可能“不合法”了!明年7月1日起强制执行!

开车的注意了!你的车可能“不合法”了!明年7月1日起强制执行!

刘哥谈体育
2026-09-03 13:04:16
罚款70万后首度发声,伦纳德否认知情却被文件打脸

罚款70万后首度发声,伦纳德否认知情却被文件打脸

日常碎碎念啊
2026-09-04 10:48:16
iPhone Ultra配置基本确认:折痕无法消除,国行或14999元起

iPhone Ultra配置基本确认:折痕无法消除,国行或14999元起

TechWeb
2026-09-03 11:20:06
霍启刚一家7口新疆旅行,郭晶晶素颜和善又大气,霍震霆坐姿霸气

霍启刚一家7口新疆旅行,郭晶晶素颜和善又大气,霍震霆坐姿霸气

小疯子耶
2026-09-03 15:25:33
孙宇晨紧急报案,新瓜炸上热搜!

孙宇晨紧急报案,新瓜炸上热搜!

互联网品牌官
2026-09-03 14:30:40
官宣,伦纳德快船处罚出炉,禁赛1年,罚款3000万,选秀权没收

官宣,伦纳德快船处罚出炉,禁赛1年,罚款3000万,选秀权没收

喜欢体育的猫
2026-09-03 07:43:14
郑钦文2-1普丁塞娃!激动怒吼庆祝,杀进美网32强,狂赚195万奖金

郑钦文2-1普丁塞娃!激动怒吼庆祝,杀进美网32强,狂赚195万奖金

侃球熊弟
2026-09-04 04:24:32
韩国主办方拒换涉台标牌,中方零容忍果断撤展,就算道歉也不管用

韩国主办方拒换涉台标牌,中方零容忍果断撤展,就算道歉也不管用

面包夹知识
2026-09-03 18:19:36
52次失误还能赢? 郑钦文用一场“丑陋的胜利”,撕碎美网AI预测

52次失误还能赢? 郑钦文用一场“丑陋的胜利”,撕碎美网AI预测

玫瑰枪口抵心脏w
2026-09-04 07:52:15
中国体育、网协齐发声!现在的郑钦文,证实女网主帅30天前说的话

中国体育、网协齐发声!现在的郑钦文,证实女网主帅30天前说的话

星Xin辰大海
2026-09-04 09:58:58
伊朗发射导弹造成众多美军阵亡,以色列心里很发毛,扬言随时敢打

伊朗发射导弹造成众多美军阵亡,以色列心里很发毛,扬言随时敢打

面包夹知识
2026-09-03 18:14:56
物业起诉你欠物业费?法官问为啥不交,记住用这三句话回答

物业起诉你欠物业费?法官问为啥不交,记住用这三句话回答

小鹿姐姐情感说
2026-09-02 00:13:46
博主曝华为P70 Pro用三星旧内存,随后发文道歉承认伪造

博主曝华为P70 Pro用三星旧内存,随后发文道歉承认伪造

i黑马
2026-09-03 14:59:06
为什么 USB 接口前 20 年永远插不准?发明者承认当年就差 2 美分

为什么 USB 接口前 20 年永远插不准?发明者承认当年就差 2 美分

粤语音乐喷泉
2026-09-04 07:29:53
村民称“书记只送了两株苗,为啥公号说多次自掏腰包买苗”,琼海通报:已第一时间删除文章,向当事人诚恳致歉,对撰稿人予以批评教育

村民称“书记只送了两株苗,为啥公号说多次自掏腰包买苗”,琼海通报:已第一时间删除文章,向当事人诚恳致歉,对撰稿人予以批评教育

蓬勃新闻
2026-09-04 00:43:16
武汉街头正大量出现,20岁大学生一个月赚了7000元;有人半天花掉两三百元,“这钱花得值”

武汉街头正大量出现,20岁大学生一个月赚了7000元;有人半天花掉两三百元,“这钱花得值”

极目新闻
2026-09-01 13:04:24
2026-09-04 11:00:49
我是一个粉刷匠2
我是一个粉刷匠2
有态度网友ytd
265文章数 165关注度
往期回顾 全部

科技要闻

OpenAI深夜王炸!GPT-6 Astra来了

头条要闻

尼泊尔泥石流致1290死 民众拍下山洪吞没山谷建筑过程

头条要闻

尼泊尔泥石流致1290死 民众拍下山洪吞没山谷建筑过程

体育要闻

梅西:巴萨10号与阿根廷10号

娱乐要闻

王宝强冯清八年未领证!真相令人泪目

财经要闻

电池税开征,纯电车利润快归零了

汽车要闻

30.99-39.99万 价格够狠、配置够满、豪华够硬 奇瑞捷豹路虎神行者8上市即爆单

态度原创

教育
数码
游戏
旅游
公开课

教育要闻

天府新区开学收心指南:家长现在做这7件事,娃开学不慌

数码要闻

小米18 Fold内外屏均标配超级像素技术:全RGB排列、自带AR膜

科乐美新作《绯红狂想曲》公布,魔法少女卷入纽约黑帮阴谋

旅游要闻

“一江一河”金秋夜游只要15元?浦江赏灯、苏河吃月饼全安排

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版