网易首页 > 网易号 > 正文 申请入驻

驾驶是向前看,为什么自动驾驶还要记住过去?

0
分享至

本文首发于智驾最前沿微信公众号,2026年,小鹏第二代VLA引入了30秒历史上下文,同时加入未来6秒预测。

这里有一个很有意思的问题,驾驶本质上是在判断下一步该怎么走,为什么模型还需要不断回看已经发生的事情?

01

只看现在

为什么还不够?

假设前方有一辆车,当前距离你的车有40米。

单看这一帧,自动驾驶系统可以知道前方有车,并估计它当前的位置等空间状态,但很难仅凭这一瞬间判断它接下来究竟会怎么走。

如果把过去几秒的信息加入进来,情况就不同了。

这辆车可能原本保持车道行驶,随后逐渐向旁边偏移,接着又开始减速。



图片源自:网络

单独看当前画面,它只是距离40米的一辆车;把连续状态串起来后,系统看到的则是一个正在发生变化的交通参与者。

这也是历史信息真正的价值。

它不是为了让模型知道过去发生过什么,而是让模型知道当前状态经过怎样的变化形成。

驾驶场景中有大量类似情况。

一个行人重新出现在车辆前方,当前画面只能告诉模型这里出现了一个行人。

但如果此前这个行人曾被停靠车辆遮挡,或者一直在朝道路方向移动,那么历史信息就能帮助模型理解,这次出现并不是一个孤立事件。

旁边车辆突然靠近也是如此。

当前距离只是一个结果,过去几秒的横向位置变化,才能帮助系统判断它是在正常行驶,还是正在持续向自己的车道靠近。

也就是说,当前状态可以告诉智驾模型现在是什么样,历史状态则可以告诉智驾模型这个状态是经过怎样的变化形成的。

而这恰是预测未来所需要的信息。

02

预测未来

为什么反而离不开过去?

自动驾驶真正要做的,并不是判断当前画面,而是根据当前道路状态决定下一步动作。

但当前状态本身并不会包含足够的信息。

比如一辆车当前正在减速。它可能只是短暂减速,也可能已经连续减速了几秒;它可能很快恢复正常行驶,也可能因为前方拥堵停车。

这些情况在某一个瞬间可能非常相似,但对应的未来完全不同。

所以,自动驾驶预测未来时,需要的不只是当前的空间状态,还需要知道状态正在朝哪个方向变化。

这也是时间信息进入自动驾驶模型的重要原因。



图片源自:网络

CVPR 2025的研究《Bridging Past and Future: End-to-End Autonomous Driving with Historical Prediction and Planning》就专门讨论了历史信息与未来预测、规划之间的关系。

该研究通过历史信息增强感知与运动规划,并在nuScenes的开放环和闭环测试中验证了这种时序建模方法。

该研究指出,传统方法要么在运动规划中丢失历史信息,要么未能与规划的多步性质对齐;历史信息需要根据规划的时间步结构,在感知和规划的不同阶段分别注入。

这背后逻辑可以理解为,过去发生了什么,决定了当前状态是怎样形成的;当前状态和变化趋势,又决定了未来可能出现什么。

因此,自动驾驶模型记住过去,并不是把过去当成一个单独的信息库,而是把与当前驾驶相关的历史状态变成预测未来的一部分。

03

记住过去之后

自动驾驶到底多知道了什么?

对于智驾系统来说,真正有价值的历史信息,并不是越多越好。

如果将大量与当前驾驶无关的历史内容全部保留下来,只会增加模型处理上下文的计算成本,也可能引入与当前决策无关的信息。

真正需要保留的,是那些能够解释当前状态、帮助判断未来的历史信息。

譬如一个行人刚刚被遮挡,车辆需要知道他此前出现在哪里;前车开始减速,系统需要判断这种变化是瞬时状态,还是已经形成了持续趋势。



图片源自:网络

这意味着自动驾驶需要的记忆,并不是人类意义上的完整记忆,而更接近一种与当前驾驶任务相关的时序上下文。

小鹏官方在2026年8月公布的第二代VLA升级方案中,将Infini-VLA描述为长时序架构,在车端保留30秒历史上下文,让此前发生的动作、位置和场景继续参与当前判断;

同时,X-Foresight根据车辆位置、速度和环境等变化预判未来6秒的场景变化,车端方案以6秒作为预测窗口。

04

最后的话

智驾最前沿以为,自动驾驶模型开始记住过去,并不是驾驶逻辑发生了变化,而是模型开始更完整地处理驾驶本身的时间属性。

人类驾驶员在判断前车下一步动作时,也不会只依据眼前这一瞬间做决定,而会结合刚才观察到的速度、方向和运动变化进行判断。

驾驶看起来是在预测未来,但预测未来的依据,往往来自过去的状态变化。

对自动驾驶来说,真正需要的也不是记住所有过去,而是保留那些能够解释当前状态、帮助判断未来的时间信息。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
男子借助AI买彩票,中了508万元;本人回应:让AI选出20个号码,根据重号、连号、分布,人工再修正

男子借助AI买彩票,中了508万元;本人回应:让AI选出20个号码,根据重号、连号、分布,人工再修正

城事特搜
2026-10-31 16:06:50
波兰突发政变!总理趁总统外出访问搞事,总统半路掉头

波兰突发政变!总理趁总统外出访问搞事,总统半路掉头

基斯默默
2026-10-31 10:32:08
约基奇18+7+10双枪14记三分,格林6中1狄龙遭驱逐,掘金力克太阳

约基奇18+7+10双枪14记三分,格林6中1狄龙遭驱逐,掘金力克太阳

钉钉陌上花开
2026-10-31 12:35:15
3:2!孙颖莎险胜申裕斌艰难晋级八强,赛后接受采访句句大实话!

3:2!孙颖莎险胜申裕斌艰难晋级八强,赛后接受采访句句大实话!

田先生篮球
2026-10-30 22:36:35
33岁小伙自信“扛冻”坚持“秋冻”,早晚只穿短袖,晚饭后还骑电动车,诱发脑出血;医生:有这些基础病就别盲目“秋冻”

33岁小伙自信“扛冻”坚持“秋冻”,早晚只穿短袖,晚饭后还骑电动车,诱发脑出血;医生:有这些基础病就别盲目“秋冻”

海峡网
2026-10-30 15:22:11
25分大逆转!库里31+4+6,赛后东契奇主动走过来,一把抱住库里

25分大逆转!库里31+4+6,赛后东契奇主动走过来,一把抱住库里

担酒
2026-10-31 12:56:54
女员工称被领导掀裙子、摸大腿,导致重度抑郁,要求认定工伤!法院判了

女员工称被领导掀裙子、摸大腿,导致重度抑郁,要求认定工伤!法院判了

上观新闻
2026-10-31 10:46:11
「最佳睡眠时长,真不是8小时」再添实锤!清华大学:睡眠达这一时长,衰弱风险最低;超过8h,死亡风险涨27%;且「黄金时长」,男女有别

「最佳睡眠时长,真不是8小时」再添实锤!清华大学:睡眠达这一时长,衰弱风险最低;超过8h,死亡风险涨27%;且「黄金时长」,男女有别

华医网
2026-10-31 05:43:08
天天骂外援不中用,可抛弃的外援爆砍30分,球迷:山东真是自毁长城

天天骂外援不中用,可抛弃的外援爆砍30分,球迷:山东真是自毁长城

南海浪花
2026-10-31 09:48:10
空调安装工人(男,1999年出生)从高空坠落,不幸身亡,广东官方公布调查报告

空调安装工人(男,1999年出生)从高空坠落,不幸身亡,广东官方公布调查报告

台州交通广播
2026-10-30 20:05:09
八成iPhone Duo首发库存进了自家门店,有的店只放50台

八成iPhone Duo首发库存进了自家门店,有的店只放50台

像素与芯片
2026-10-30 18:15:27
泽连斯基公开发文表示:感谢特朗普总统批准出售“爱国者”导弹,我们将扩充乌克兰远程打击部队,确保无人机和导弹能打到俄罗斯更深处领土

泽连斯基公开发文表示:感谢特朗普总统批准出售“爱国者”导弹,我们将扩充乌克兰远程打击部队,确保无人机和导弹能打到俄罗斯更深处领土

吉刻新闻
2026-10-31 14:23:36
凯勒曼炮轰东契奇:每次进攻都找裁判,就为不回防

凯勒曼炮轰东契奇:每次进攻都找裁判,就为不回防

热血体育社
2026-10-31 06:41:57
蒋万安批沈伯洋“面目全非”:常提很多空泛的口号,但拿不出具体做法

蒋万安批沈伯洋“面目全非”:常提很多空泛的口号,但拿不出具体做法

海峡导报社
2026-10-31 13:13:03
我军首型舰载察打一体隐身无人机在四川舰成功起降

我军首型舰载察打一体隐身无人机在四川舰成功起降

界面新闻
2026-10-30 16:52:53
“这辈子活到头了!”苏州电网清华男相亲被嫌弃,女方还发到网上炫耀,网友们讥讽道

“这辈子活到头了!”苏州电网清华男相亲被嫌弃,女方还发到网上炫耀,网友们讥讽道

蝴蝶花雨话教育
2026-10-27 00:05:14
太荒唐了!已婚女子和男网友约会,发生关系后累的睡着,被惊醒后拒绝给男网友钱,女子追悔莫及

太荒唐了!已婚女子和男网友约会,发生关系后累的睡着,被惊醒后拒绝给男网友钱,女子追悔莫及

丫头舫
2026-10-26 15:48:41
高校老师怒了:“科研又不是种地,年年有收成,而且就算种地还要考虑天灾呢!”高校逼学者高频考核出成果,还只许成功不许失败!

高校老师怒了:“科研又不是种地,年年有收成,而且就算种地还要考虑天灾呢!”高校逼学者高频考核出成果,还只许成功不许失败!

学术眺望
2026-10-30 09:15:03
女子照顾继父直至去世,办完丧事后,其多年未探望亲闺女现身要分房产,法院:继女可分适当遗产;房产归老伴,支付老人亲闺女50万元

女子照顾继父直至去世,办完丧事后,其多年未探望亲闺女现身要分房产,法院:继女可分适当遗产;房产归老伴,支付老人亲闺女50万元

蓬勃新闻
2026-10-31 07:55:20
下周一会不会大跌甚至暴跌?我直接说重点,11.2开盘前听我一言

下周一会不会大跌甚至暴跌?我直接说重点,11.2开盘前听我一言

趋势清风侠
2026-10-31 10:27:40
2026-10-31 17:55:00
智驾最前沿
智驾最前沿
自动驾驶领域专业的技术、资讯分享平台。我们的slogan是:聚焦智能驾驶 ,紧盯行业前沿。
629文章数 11关注度
往期回顾 全部

科技要闻

苦等两年!国行苹果AI下周开测,12月推出

头条要闻

女子减重40斤后被指撞脸王祖贤 已去景区扮演"聂小倩"

头条要闻

女子减重40斤后被指撞脸王祖贤 已去景区扮演"聂小倩"

体育要闻

决胜时刻三连击!勒布朗绝命补篮价值千金

娱乐要闻

赵丽颖解锁新身份 出任金鸡创投主评审

财经要闻

Meta、谷歌、英特尔增发认购者集体浮亏

汽车要闻

钛7上市一年销量突破30万 海外半年销量2.7万

态度原创

数码
教育
时尚
本地
旅游

数码要闻

439元小米智能门铃4 Pro双摄版发售:5MP双摄+ 9800mAh电池

教育要闻

一眼就能看出答案的几何题,孩子没有解答出来

别再穿马蹄鞋、小棕鞋了,这双鞋才是秋冬穿搭的“顶流”

本地新闻

秋假去哪玩,4 站打卡京郊限定秋色

旅游要闻

何以中国·壮美八桂|“门票经济”之外,桂林文旅正寻找新的增长点

无障碍浏览 进入关怀版