网易首页 > 网易号 > 正文 申请入驻

蚂蚁灵波开源 LingBot-Video,全球首个面向具身的视频基模来了!

0
分享至

7 月 9 日,蚂蚁灵波开源 LingBot-Video,这是全球首个基于 Mixture-of-Experts(MoE)架构、面向具身智能的开源视频生成基础模型。该模型围绕机器人和具身智能的核心需求重新设计视频预训练范式,在推理效率、物理合理性、动作理解和任务完成度等方面取得系统性提升,为视频基础模型从数字内容创作走向具身智能提供了新的开源底座。

在北京大学联合字节跳动发布的基准 RBench 上,LingBot-Video 的总分是 0.620,超越了 Wan2.6(0.607)、Seedance 1.5 Pro(0.584)、Cosmos3 Super(0.581)。RBench 作为面向机器人操作视频的综合评测基准,重点考察模型能否生成符合真实物理规律的机器人行为。这一结果表明,LingBot-Video 在生成机器人相关视频时,更能保持动作过程的合理性和任务执行的完整性。



(图说:LingBot-Video 在 RBench 上性能最优)

为进一步验证 LingBot-Video 对物理世界变化的建模能力,蚂蚁灵波在内部 benchmark 中从通用质量和具身领域两个维度进行评估。结果显示,对比 NVIDIA Cosmos 3、Wan 2.2 A14B、LongCat-Video、Hunyuan Video 1.5、LTX-2.3 等五个开源模型,LingBot-Video 在具身领域表现优于主要基线模型。



(图说:综合评测显示,LingBot-Video在具身相关场景中展现出更强的物理理解和动作一致性)

过去几年,视频生成模型在画质、流畅度和创意表达上快速进步,但对于具身智能来说,一个看起来逼真、动作流畅的视频,却无法反映真实的物理规律,难以支撑机器人连续预测、规划和执行任务。与此同时,具身智能还要求模型具备更高推理效率,以适应实时交互和控制闭环。

这也让视频生成开始出现两种不同的演进方向:一条通向影院,服务于内容创作;另一条通向机器人,服务于物理世界的理解、预测与交互。LingBot-Video 正是蚂蚁灵波面向具身智能开辟视频生成新路线的重要探索。

LingBot-Video 从架构、数据和训练三方面进行了系统创新。

在架构上,LingBot-Video 采用 DiT + MoE 设计,以 MoE 替代传统 Dense 架构,在扩大模型容量的同时控制单次推理成本。其 30B 总参数模型在生成时仅激活约 3B 参数,相比同等参数规模 Dense 架构拥有约 3 倍推理效率。这一设计使模型既能获得大规模参数带来的视觉表达能力,又更适合具身智能对高效推理的要求。

在数据上,LingBot-Video 构建了数据画像引擎,在海量互联网视频的基础上进一步引入 VLA、VLN、Ego 等机器人相关数据,覆盖灵巧操作、机器人移动和第一视角交互等场景,总规模达 7 万小时的具身数据。这些数据帮助模型学习动作与环境变化之间的关系,而不只是学习视频的表面纹理和视觉风格。







在训练上,LingBot-Video 引入多维强化学习奖励系统。除美学、prompt 跟随和运动一致性等常规指标外,模型进一步围绕物理合理性和任务完成度进行对齐,使生成结果更符合真实世界规律,也更贴近机器人在真实世界完成任务的需求。

据介绍,LingBot-Video 可用于机器人动作预测、仿真数据生成、动作条件建模、世界模型研究等方向。目前,LingBot-Video 已正式开源。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
社死名场面啊!一件裙子把女明星的“小肚子”逼上热搜,强光一打,她吓得死死捂着肚子,满脸写着尴尬,真相流出

社死名场面啊!一件裙子把女明星的“小肚子”逼上热搜,强光一打,她吓得死死捂着肚子,满脸写着尴尬,真相流出

火山詩话
2026-09-11 10:01:05
A股三大指数跌幅扩大,沪指跌2%

A股三大指数跌幅扩大,沪指跌2%

每日经济新闻
2026-09-11 10:48:03
私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

乌克兰小静
2026-09-10 09:09:45
大学生被40多岁富婆包养后,爱上富婆想娶对方,2019年富婆将他分尸,不想让丈夫知道

大学生被40多岁富婆包养后,爱上富婆想娶对方,2019年富婆将他分尸,不想让丈夫知道

汉史趣闻
2026-09-10 14:48:13
暴跌98.7%,AI第一大忽悠栽了

暴跌98.7%,AI第一大忽悠栽了

投资家
2026-09-10 21:34:12
网友称父亲打120误点荣耀“魔法画报”,致母亲错过最佳抢救时机去世?荣耀客服回应

网友称父亲打120误点荣耀“魔法画报”,致母亲错过最佳抢救时机去世?荣耀客服回应

潇湘晨报
2026-09-11 13:28:11
2027将会是中华人民共和国全党、全军、全国各族人民重要的一年

2027将会是中华人民共和国全党、全军、全国各族人民重要的一年

生活的哲学
2026-09-11 07:49:04
南京大牌档福州门店均停业,曾是“排队王”

南京大牌档福州门店均停业,曾是“排队王”

海峡网
2026-09-11 10:39:36
875亿现金储备加持,理想汽车26.5亿加码电池产业链

875亿现金储备加持,理想汽车26.5亿加码电池产业链

道哥说车
2026-09-11 09:35:25
杀进决赛却丢世界第1!萨巴伦卡不解:这很奇怪 会努力把它抢回来

杀进决赛却丢世界第1!萨巴伦卡不解:这很奇怪 会努力把它抢回来

风过乡
2026-09-11 13:08:30
生涯首进美网决赛!莱巴金娜2-1逆转高芙,将战萨巴伦卡争冠

生涯首进美网决赛!莱巴金娜2-1逆转高芙,将战萨巴伦卡争冠

全景体育V
2026-09-11 11:12:32
不到一年,被捧上神坛的“英雄”成了“人人喊打的过街老鼠”

不到一年,被捧上神坛的“英雄”成了“人人喊打的过街老鼠”

小马姨
2026-09-01 10:37:59
苹果突然官宣:9月11日,iPhone17Pro抵扣价6400元

苹果突然官宣:9月11日,iPhone17Pro抵扣价6400元

搞机小帝
2026-09-11 10:53:02
这张照片,在印度引发热议!

这张照片,在印度引发热议!

环球时报国际
2026-09-11 07:52:48
走向百年企业,吉利做了一项系统工程

走向百年企业,吉利做了一项系统工程

砺石商业评论
2026-09-09 09:59:38
不忍了,韩旭发言一针见血,中国女篮最大问题或是宫鲁鸣和张子宇

不忍了,韩旭发言一针见血,中国女篮最大问题或是宫鲁鸣和张子宇

宗介说体育
2026-09-11 10:29:21
刘翔,2026年教师节,多捐了3毛3 发文地址已从上海变更为江苏

刘翔,2026年教师节,多捐了3毛3 发文地址已从上海变更为江苏

劲爆体坛
2026-09-10 11:59:09
复旦女硕士在意大利旅游被蜱虫叮咬染重症,严重时生活不能自理,家属全网求助:暂无特效药,希望找到擅长蜱传疾病的专家,寻求诊疗方案

复旦女硕士在意大利旅游被蜱虫叮咬染重症,严重时生活不能自理,家属全网求助:暂无特效药,希望找到擅长蜱传疾病的专家,寻求诊疗方案

鲁中晨报
2026-09-11 07:15:05
亚运开门红!中国男篮38分狂胜哈萨克斯坦 庞峥麟19分李弘权16+9

亚运开门红!中国男篮38分狂胜哈萨克斯坦 庞峥麟19分李弘权16+9

醉卧浮生
2026-09-11 10:38:01
25死5伤!青岛货轮火灾搜救结束,本次事故至少有4个重要信息披露

25死5伤!青岛货轮火灾搜救结束,本次事故至少有4个重要信息披露

火山詩话
2026-09-10 20:24:19
2026-09-11 15:15:00
未来网 incentive-icons
未来网
爱心传递希望 专业成就梦想
8466文章数 88505关注度
往期回顾 全部

科技要闻

罗永浩连用7个“抄的”吐槽苹果折叠屏

头条要闻

小孩坠楼砸烂宝马定损5万 车主:家长要求拆车件维修

头条要闻

小孩坠楼砸烂宝马定损5万 车主:家长要求拆车件维修

体育要闻

37岁还能场场进球,还能翻跟头!

娱乐要闻

17岁拿下世界第一,还被亲妈吐槽?

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

买菜车也有小乐趣 风云T7不止是台合格家用SUV

态度原创

游戏
家居
手机
本地
房产

"国服孙策"外卖小哥后续:《王者荣耀》官方送皮肤

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

荣耀、vivo、OPPO全双线并行,唯小米与众不同

本地新闻

拼假 13 天国内长线路线合集

房产要闻

时隔7年,绿地海南再拿地!

无障碍浏览 进入关怀版