网易首页 > 网易号 > 正文 申请入驻

从生成画面到生成交互,千里科技发布世界模型新成果

0
分享至

千里科技(AFARI)旗下AI研究团队 World Model Team 于2026年8月发布 BehaviorWorldGen 框架,首次系统解决了自动驾驶世界模拟器中“周围车辆不会真实反应”的结构性缺陷。该框架通过核心组件 BehaviorFlow 实现对周围车辆行为的可控生成,打通动作模型与世界模拟器的自改进闭环。该研究针对自动驾驶行业从“堆路测数据”转向“模拟器自训练闭环”的趋势,解决了闭环中的关键瓶颈。

自动驾驶动作模型(规划器、VLA模型)的训练依赖世界模拟器生成未来场景数据。但现有模拟器存在两个根本缺陷。第一,周围车辆不反应。模拟器只根据自车动作生成场景,周围车辆要么回放历史记录,要么作为生成副产物出现,不会对自车做出真实响应。一个现实中会引发碰撞的轨迹,在模拟器里可能看起来完全安全。第二,长尾场景覆盖不足。模拟器无差别地复现常规驾驶,难以生成加塞、让行、路口博弈等需要多车协调的关键交互场景,导致训练数据分布不均衡。论文指出,这有助于解释为什么稀有交互场景至今仍然难以学习。



BehaviorFlow 是整个框架的核心,是一种元动作条件的交通流模型。它为每个车辆注入可解释的帧级元动作(如保持车道、变道、转弯、掉头、旁路等),作为显式行为控制手柄。注入后,周围车辆能对自车及其他车辆做出真实响应,实现多车交互一致性。同时可按需编排稀有交互场景,将动作模型表现最差的失败案例转化为针对性训练数据。框架以结构化轨迹为模块间接口。上游兼容各类动作模型,包括端到端规划器和VLA模型;下游对接生成式世界模型和3D高斯溅射重建式模拟器。



在关键数据方面,因果模型相比双向模型推理速度提升近70倍(0.3s/帧 vs 20s/帧),同时生成质量反而更优(FID 4.36 vs 6.72)。在三种不同架构的动作模型上均实现一致提升:ChainFlow-VLA 在 NAVSIM 基准上达到 93.3 PDMS(较原始93.1提升0.2),为同类方法最高;ReCogDrive 从 86.5 提升至 87.3;DiffusionDrive 从 87.7 提升至 88.6。在最困难场景区间(PDMS<0.15),原模型接近崩溃(PDMS=0.0),加入 BehaviorWorldGen 生成数据后恢复至 34.8,属于质变式恢复,远超常规微调幅度。



除核心的 BehaviorFlow 外,论文还展示了两项辅助技术能力。一是场景编辑能力,包括稀有物体插入(动物跨帧一致、运动物理合理)、雾度连续控制、天气风格迁移(多云、夜间、雨天、雾天、雪天)、轨迹编辑(车道变换、超车、直行转转弯、转弯转直行)。二是3D高斯溅射场景外推,团队用 BehaviorFlow 预测未来交通演化,用生成式世界模型合成多视图观测和LiDAR点云,追加到原始日志中联合重建,突破了重建式模拟器只能在原始观测区域内高质量渲染的空间边界限制。论文指出,LiDAR监督对于维持外推区域的几何可靠性至关重要。



论文的三大贡献为:首次系统指出自动驾驶自改进循环中模拟器无法控制周围车辆行为的结构性缺陷;提出 BehaviorWorldGen 框架,核心 BehaviorFlow 提供元动作条件的代理行为控制,打通动作模型与世界模拟器的外层闭环;在多种动作模型和世界模拟器上验证有效,支持对稀有交互场景进行规模化优化。

数据说明:以上数据均来自论文 arXiv:2608.22187v2 的实验结果,引用时建议标注论文出处。NAVSIM 是大规模自动驾驶闭环仿真基准测试,PDMS(PDM Score)为其核心评估指标,满分100,综合衡量安全性、合规性、舒适度和行车效率。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
外媒:都允许英伟达芯片出口了,中国市场竟然还不赶紧买,不买美国芯片相当于“卡自己脖子”

外媒:都允许英伟达芯片出口了,中国市场竟然还不赶紧买,不买美国芯片相当于“卡自己脖子”

逍遥漠
2026-11-08 13:27:10
韦世豪面临5个月无球可踢的窘境!遭国足抛弃 最快2月底踢中超首轮

韦世豪面临5个月无球可踢的窘境!遭国足抛弃 最快2月底踢中超首轮

风过乡
2026-11-10 14:38:46
斯诺克连爆大冷:世界冠军及亚军出局,韦克林进4强,赵心童利好

斯诺克连爆大冷:世界冠军及亚军出局,韦克林进4强,赵心童利好

球场没跑道
2026-11-10 08:53:30
68岁整形名医爆料:尸体脂肪填充正流行,54岁女星当场嫌恶

68岁整形名医爆料:尸体脂肪填充正流行,54岁女星当场嫌恶

影视情报室
2026-11-09 05:21:42
央视曝光养生骗局:MCN机构围猎老年人,老人微信上有77万条未读消息,受害者被拉入微信群,AI推销保健食品,讲课“专家”为批量生成

央视曝光养生骗局:MCN机构围猎老年人,老人微信上有77万条未读消息,受害者被拉入微信群,AI推销保健食品,讲课“专家”为批量生成

极目新闻
2026-11-10 12:04:27
你有哪些莫名其妙的生理反应?网友:总算找到组织了!

你有哪些莫名其妙的生理反应?网友:总算找到组织了!

另子维爱读史
2026-10-23 21:10:51
中东土豪已清醒:中国武器再厉害,也没真正保护他们!真相太现实

中东土豪已清醒:中国武器再厉害,也没真正保护他们!真相太现实

历史科普馆
2026-10-30 20:11:41
汽车价格战升级: 4S店倒贴卖车,但你捡的便宜,三年后连本带利还回去

汽车价格战升级: 4S店倒贴卖车,但你捡的便宜,三年后连本带利还回去

浯江孤舟
2026-11-10 19:20:12
“就凭我这长相,28万彩礼还嫌多?”小伙转身就走:踏实过日子,从来不是漂亮的对立面

“就凭我这长相,28万彩礼还嫌多?”小伙转身就走:踏实过日子,从来不是漂亮的对立面

蝴蝶花雨话教育
2026-11-05 00:05:12
西兴隆街:北京当下最热的非标商业,是怎么练成的?

西兴隆街:北京当下最热的非标商业,是怎么练成的?

房地产观察家
2026-11-10 11:59:28
全国各大寺院陷入倒闭潮,不是顾客少了,而是自己把自己拖垮了!

全国各大寺院陷入倒闭潮,不是顾客少了,而是自己把自己拖垮了!

风干迷茫人
2026-07-06 18:12:51
跟你说个挺戳心窝子的事。咱那三艘航母——辽宁、山东、福建,说穿了,都是"先遣队",给后面真正的主角打前站、探路子、积攒家底的

跟你说个挺戳心窝子的事。咱那三艘航母——辽宁、山东、福建,说穿了,都是"先遣队",给后面真正的主角打前站、探路子、积攒家底的

扶苏聊历史
2026-11-10 16:41:25
立冬后财运渐旺,3生肖稳扎稳打,11月中旬起收入稳增,家底渐厚

立冬后财运渐旺,3生肖稳扎稳打,11月中旬起收入稳增,家底渐厚

温暖心语
2026-11-10 08:25:11
黄乐这含情脉脉的桃花眼还有人畜无害的笑容,难怪连黄仁勋都沉沦了

黄乐这含情脉脉的桃花眼还有人畜无害的笑容,难怪连黄仁勋都沉沦了

一盅情怀
2026-11-09 13:07:20
一觉醒来12款新车要在这几天内公布价格,最便宜的卖5万元?

一觉醒来12款新车要在这几天内公布价格,最便宜的卖5万元?

沙雕小琳琳
2026-11-10 09:22:25
武汉一尾号为“98888888”的手机号以128万元拍卖遇冷;卖家:当年花费100多万购入,目前月租仅8元,坚信能以此价格拍出

武汉一尾号为“98888888”的手机号以128万元拍卖遇冷;卖家:当年花费100多万购入,目前月租仅8元,坚信能以此价格拍出

先锋新闻
2026-11-10 14:13:54
这4大岗位正在逐步被清出事业编队伍!

这4大岗位正在逐步被清出事业编队伍!

细说职场
2026-11-10 16:03:01
3.72 美元一张的选票 ——2026 美国中期选举的背后

3.72 美元一张的选票 ——2026 美国中期选举的背后

西楼饮月
2026-11-10 21:12:08
供电局再次提醒:这三种家电不用拔插头,不然电费翻倍!

供电局再次提醒:这三种家电不用拔插头,不然电费翻倍!

叮当当科技
2026-11-03 18:57:06
肯尼迪的秘书回忆:亲眼见到赫本走进肯尼迪的房间,屋里很快传来赫本清脆的笑声,这背后是一场怎样颠覆认知的危险博弈

肯尼迪的秘书回忆:亲眼见到赫本走进肯尼迪的房间,屋里很快传来赫本清脆的笑声,这背后是一场怎样颠覆认知的危险博弈

磊子讲史
2026-10-24 11:22:44
2026-11-10 23:36:49
易北辰
易北辰
科技行业分析师
1042文章数 18285关注度
往期回顾 全部

科技要闻

最强Claude来了!8天从零写出电脑系统

头条要闻

女子买7元早餐时余额不足 才发现卡里近26万不翼而飞

头条要闻

女子买7元早餐时余额不足 才发现卡里近26万不翼而飞

体育要闻

金球先生无缘世界最佳阵容,为什么?

娱乐要闻

W盛典:章子怡缺席,谷爱凌无缘主桌

财经要闻

黄奇帆之子黄然非,魏桥集团商业往事

汽车要闻

雨中的埃安Ray7,有点上头

态度原创

本地
手机
艺术
公开课
军事航空

本地新闻

乌兰察布:以前种土豆,现在种Token

手机要闻

荣耀CEO李健官宣Magic9系列旗舰手机销量突破50万台,称还有更多惊喜将揭晓

艺术要闻

朴实诗意的乡村风景油画,瑞士画家路易吉·基亚利瓦

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普:伊朗战事已“事实上结束 ”

无障碍浏览 进入关怀版