网易首页 > 网易号 > 正文 申请入驻

从生成画面到生成交互,千里科技发布世界模型新成果

0
分享至

千里科技(AFARI)旗下AI研究团队 World Model Team 于2026年8月发布 BehaviorWorldGen 框架,首次系统解决了自动驾驶世界模拟器中“周围车辆不会真实反应”的结构性缺陷。该框架通过核心组件 BehaviorFlow 实现对周围车辆行为的可控生成,打通动作模型与世界模拟器的自改进闭环。该研究针对自动驾驶行业从“堆路测数据”转向“模拟器自训练闭环”的趋势,解决了闭环中的关键瓶颈。

自动驾驶动作模型(规划器、VLA模型)的训练依赖世界模拟器生成未来场景数据。但现有模拟器存在两个根本缺陷。第一,周围车辆不反应。模拟器只根据自车动作生成场景,周围车辆要么回放历史记录,要么作为生成副产物出现,不会对自车做出真实响应。一个现实中会引发碰撞的轨迹,在模拟器里可能看起来完全安全。第二,长尾场景覆盖不足。模拟器无差别地复现常规驾驶,难以生成加塞、让行、路口博弈等需要多车协调的关键交互场景,导致训练数据分布不均衡。论文指出,这有助于解释为什么稀有交互场景至今仍然难以学习。



BehaviorFlow 是整个框架的核心,是一种元动作条件的交通流模型。它为每个车辆注入可解释的帧级元动作(如保持车道、变道、转弯、掉头、旁路等),作为显式行为控制手柄。注入后,周围车辆能对自车及其他车辆做出真实响应,实现多车交互一致性。同时可按需编排稀有交互场景,将动作模型表现最差的失败案例转化为针对性训练数据。框架以结构化轨迹为模块间接口。上游兼容各类动作模型,包括端到端规划器和VLA模型;下游对接生成式世界模型和3D高斯溅射重建式模拟器。



在关键数据方面,因果模型相比双向模型推理速度提升近70倍(0.3s/帧 vs 20s/帧),同时生成质量反而更优(FID 4.36 vs 6.72)。在三种不同架构的动作模型上均实现一致提升:ChainFlow-VLA 在 NAVSIM 基准上达到 93.3 PDMS(较原始93.1提升0.2),为同类方法最高;ReCogDrive 从 86.5 提升至 87.3;DiffusionDrive 从 87.7 提升至 88.6。在最困难场景区间(PDMS<0.15),原模型接近崩溃(PDMS=0.0),加入 BehaviorWorldGen 生成数据后恢复至 34.8,属于质变式恢复,远超常规微调幅度。



除核心的 BehaviorFlow 外,论文还展示了两项辅助技术能力。一是场景编辑能力,包括稀有物体插入(动物跨帧一致、运动物理合理)、雾度连续控制、天气风格迁移(多云、夜间、雨天、雾天、雪天)、轨迹编辑(车道变换、超车、直行转转弯、转弯转直行)。二是3D高斯溅射场景外推,团队用 BehaviorFlow 预测未来交通演化,用生成式世界模型合成多视图观测和LiDAR点云,追加到原始日志中联合重建,突破了重建式模拟器只能在原始观测区域内高质量渲染的空间边界限制。论文指出,LiDAR监督对于维持外推区域的几何可靠性至关重要。



论文的三大贡献为:首次系统指出自动驾驶自改进循环中模拟器无法控制周围车辆行为的结构性缺陷;提出 BehaviorWorldGen 框架,核心 BehaviorFlow 提供元动作条件的代理行为控制,打通动作模型与世界模拟器的外层闭环;在多种动作模型和世界模拟器上验证有效,支持对稀有交互场景进行规模化优化。

数据说明:以上数据均来自论文 arXiv:2608.22187v2 的实验结果,引用时建议标注论文出处。NAVSIM 是大规模自动驾驶闭环仿真基准测试,PDMS(PDM Score)为其核心评估指标,满分100,综合衡量安全性、合规性、舒适度和行车效率。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
詹姆斯取得常规赛生涯第1055胜,距离成为历史第一还差20胜

詹姆斯取得常规赛生涯第1055胜,距离成为历史第一还差20胜

安逸安逸
2026-11-10 03:11:03
暗渡陈仓:得州重挫后,SpaceX数据中心转向亚利桑那!

暗渡陈仓:得州重挫后,SpaceX数据中心转向亚利桑那!

胜研集
2026-11-09 06:03:55
金鸡奖这一夜,梁家辉、高叶首提夺得影帝后,兰西雅爆冷拿奖,他们获奖感言好真诚

金鸡奖这一夜,梁家辉、高叶首提夺得影帝后,兰西雅爆冷拿奖,他们获奖感言好真诚

娱君坠星河
2026-11-10 23:06:23
在穆帅的战术安排中,皇马对手今后或面对穆帅亲手打造出的“丧礼中场3人组”

在穆帅的战术安排中,皇马对手今后或面对穆帅亲手打造出的“丧礼中场3人组”

福酱的小时光
2026-11-10 10:02:58
张维为这是在高级黑,还是认真讲历史?

张维为这是在高级黑,还是认真讲历史?

熊倌儿
2026-10-30 08:43:40
1947年,一位国军司令来到陕北,毛主席当场说:你就给彭德怀当副司令吧!

1947年,一位国军司令来到陕北,毛主席当场说:你就给彭德怀当副司令吧!

历史龙元阁
2026-11-09 17:55:16
纪检委查一个人最狠的方法,这个阶段一夜白头,很多人都扛不住!

纪检委查一个人最狠的方法,这个阶段一夜白头,很多人都扛不住!

细说职场
2026-11-09 13:34:40
李嘉诚之子李泽楷,创了一个世界纪录

李嘉诚之子李泽楷,创了一个世界纪录

新浪财经
2026-11-10 18:49:23
防得东契奇只得32分!湖人联盟第一战绩还要被嘲!

防得东契奇只得32分!湖人联盟第一战绩还要被嘲!

篮球大图
2026-11-10 10:57:16
他只活了27岁,却让人怀念了1200年

他只活了27岁,却让人怀念了1200年

长风文史
2026-11-09 20:49:36
英伟达,夜盘股价直线拉升

英伟达,夜盘股价直线拉升

21世纪经济报道
2026-11-10 17:09:59
穿的这么精致去果园里干活,虽然不实用,但不可否认确实很有魅力

穿的这么精致去果园里干活,虽然不实用,但不可否认确实很有魅力

美女穿搭分享
2026-11-08 19:12:45
法国籍女子在韩商场叫嚣:全世界都讨厌中国人!中国女子当场出手

法国籍女子在韩商场叫嚣:全世界都讨厌中国人!中国女子当场出手

安梦入天下
2026-09-21 12:40:03
再聪明的孩子,也会被“精细化管控”养废!无数家庭正在中招

再聪明的孩子,也会被“精细化管控”养废!无数家庭正在中招

育儿教育日记
2026-11-10 19:45:27
特朗普政府请求中国帮助,外交部回应

特朗普政府请求中国帮助,外交部回应

极目新闻
2026-11-09 16:52:52
拜登披露回忆录部分内容:特朗普当选后态度曾异常热情,惊得我一时语塞

拜登披露回忆录部分内容:特朗普当选后态度曾异常热情,惊得我一时语塞

环球网资讯
2026-11-10 22:42:38
上海两大日系品牌旗舰店互换场地,无印良品全球旗舰店将落地市中心

上海两大日系品牌旗舰店互换场地,无印良品全球旗舰店将落地市中心

东京在线
2026-11-10 23:07:13
终于轮到银行头疼了!越来越多的储户,主动把存款分散到不同银行

终于轮到银行头疼了!越来越多的储户,主动把存款分散到不同银行

举头月已燕归来
2026-10-15 02:52:26
网传iOS 27.2沙盒漏洞曝光 可突破eSIM限制解锁满血苹果智能

网传iOS 27.2沙盒漏洞曝光 可突破eSIM限制解锁满血苹果智能

PChome电脑之家
2026-11-10 17:49:10
反对派组阁提名:利伯曼主持国防,卡哈纳任议长

反对派组阁提名:利伯曼主持国防,卡哈纳任议长

以色列计划Pro
2026-11-10 22:58:26
2026-11-10 23:47:00
易北辰
易北辰
科技行业分析师
1042文章数 18285关注度
往期回顾 全部

科技要闻

最强Claude来了!8天从零写出电脑系统

头条要闻

"花坛藏尸案"凶手整容痕迹明显 听到死刑判决嘴角抽动

头条要闻

"花坛藏尸案"凶手整容痕迹明显 听到死刑判决嘴角抽动

体育要闻

金球先生无缘世界最佳阵容,为什么?

娱乐要闻

W盛典:章子怡缺席,谷爱凌无缘主桌

财经要闻

黄奇帆之子黄然非,魏桥集团商业往事

汽车要闻

雨中的埃安Ray7,有点上头

态度原创

数码
房产
手机
家居
教育

数码要闻

Meta Muse杀入智能手表,AI硬件要变天了?

房产要闻

4.1亿起拍!停了7年,亚龙湾终于要卖地了!

手机要闻

三星Galaxy S27系列影像配置全曝光,2亿主摄加持!

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

两地公示2026年“基础教育精品课”省级拟推荐名单

无障碍浏览 进入关怀版