![]()
AI视频生成初创公司Visko Platform Inc.宣布完成1000万美元Pre-Seed轮融资,投资方为Llama Ventures。与此同时,该公司正式向公众开放其首个基础模型Orbis,该模型基于公司提出的全新范式——"实时模型"。
解决长视频生成的核心痛点
Visko致力于解决现有AI视频生成模型和世界模型中最棘手的问题:这类模型在长时间运行后,往往因无法维持逻辑与视觉连贯性而逐渐崩溃。Sora等传统AI视频生成工具属于"查询模型",用户输入提示词后需要等待,最终得到的是一段短暂、静态、离线的视频片段。
Visko的实时模型则截然不同,设计目标是持续不间断地运行。Orbis能够实时连续生成并流式传输可交互的视觉世界,而非渲染静态文件,这意味着用户可以在任意时刻介入:添加或修改提示词,指示视频中的角色做出不同行为,输出内容将即时响应,视频流不会中断。
全新架构:神经随机微分方程
Visko在博客中指出,实时模型与查询模型在架构层面存在根本差异。查询模型逐段生成内容,缺乏时间感知与持久记忆,每次接收新提示时都需要重建世界状态,长期运行会出现时间退化问题,导致视觉瑕疵、物理规律失真和色彩漂移。
Orbis的工作方式完全不同。它在一套连续的、由神经随机微分方程(Neural SDEs)驱动的动态学习系统中生成视频。具体而言,Orbis并非将每一帧视为独立的输出调用,而是在统一的潜在空间中运行一个内部"世界时钟",该潜在空间由感知、记忆与物理Token构建而成。这一架构使Orbis能够维持持久的内部状态,具备预判连续运动、保留物体细节与性能表现的能力,并能在不影响视觉连贯性的前提下吸收实时干预——即便运行数小时亦然。
创始人兼CEO尹青表示,长期连贯性始终是AI视频生成领域最大的挑战,生成的世界运行时间越长,就越容易崩溃。"我们构建Orbis的目标,就是让它在物理、视觉和叙事层面都能稳定持续,只要你想沉浸其中,它就能一直运转下去。"
4K画质、无降级运行数小时
Orbis目前已在Visko官网向所有用户开放体验,支持以4K分辨率、每秒24帧的规格流式生成交互视频。尹青表示,该模型可持续生成数小时,色彩与画质不出现任何可察觉的衰减。
为佐证上述能力,Visko发布了一份技术报告,在DOVER美学评测及VideoAlign视觉与运动质量基准上,将Orbis与多个实时及长视频系统进行了横向对比。结果显示,Orbis超越了包括Odyssey-2在内的所有竞品,并在长视频生成人类偏好竞技场评测中位列第一。
行业认可与顾问支持
Constellation Research分析师霍尔格·穆勒对Visko的工作给予积极评价。他认为,能够精确模拟真实世界环境且不发生崩溃,其潜力不可估量。"Visko的工作表明,这一目标现在似乎已经可以实现,尤其是在当前算力资源日益丰富的背景下。Visko以动态而非静态的方式生成世界模型,理论上可以永不停止——这是一次关键的范式转变,如果其能力在现实应用中得到验证,必将引发广泛关注。成本或许是个问题,动态连续生成可能并不便宜,但能看到这样的创新,本身已经令人振奋。"
Visko的顾问委员会成员包括加州大学伯克利分校教授迈克尔·I·乔丹博士。他表示,Visko正在攻克实时AI视频生成领域最重要的问题之一。"Visko提供了一套最先进的架构,在技术层面已大幅领先于传统短片视频生成方式。同样的核心能力可以支撑极为广泛的商业应用场景,涵盖机器人技术、物理仿真、游戏以及实时创意媒体。"
Q&A
Q1:Orbis和Sora这类传统AI视频生成模型有什么区别?
A:Sora等传统模型属于"查询模型",每次输入提示词后需等待,输出的是一段短暂、静态的离线视频片段,且每次新提示都要重建世界状态,长时间运行会出现画面瑕疵和色彩漂移。Orbis则是"实时模型",能持续不间断地流式生成可交互视频,用户随时可以介入并修改提示,视频不会中断,且可运行数小时而不出现质量衰减。
Q2:Orbis用了什么技术来保持视频的长期连贯性?
A:Orbis基于神经随机微分方程(Neural SDEs)构建,在统一的潜在空间中运行一个内部"世界时钟",该空间由感知、记忆与物理Token组成。这使得Orbis拥有持久的内部状态,能预判连续运动、保留物体细节,并实时响应用户干预,从根本上避免了传统模型因缺乏持久记忆而导致的时间退化问题。
Q3:Orbis的实际表现怎么样,有没有第三方评测数据?
A:Visko发布的技术报告显示,在DOVER美学评测和VideoAlign视觉与运动质量基准测试中,Orbis超越了包括Odyssey-2在内的所有竞品,并在长视频生成人类偏好竞技场评测中排名第一。此外,加州大学伯克利分校教授迈克尔·I·乔丹和Constellation Research分析师霍尔格·穆勒均对其架构创新给予了积极评价。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.