网易首页 > 网易号 > 正文 申请入驻

不踩点不微调!Figure最新模型盲测30个家庭:首次实现零样本全身泛化

0
分享至


作者 | 韦思维、四月

编辑 | 四月

从人类身上学到的动作经验,真的能让机器人迁移到陌生环境吗?

近日消息,人形机器人公司 Figure 发布最新端到端具身模型 Helix 2.5,并让搭载该模型的人形机器人(Figure 03)在旧金山湾区的 30 套陌生住宅里接受了一场真实的“上岗盲测”。


在 420 次全盲测试中,机器人面临整理客厅、折叠毛巾和铺床三项长程家务挑战,最终交出一份56%的端到端成功率。而在完全相同的测试条件下,对照组从随机权重开始训练,成功率只有 9%。


47 个百分点的差距,测出了Index 预训练的真正价值:Helix 2.5 能够将在离线数据中学到的全身行为,直接迁移到全新的空间布局、未知物品和身体站位中,极大降低了为每个新场景重新采数和训练策略的工程成本。

30 个家庭实现零样本全身泛化

在真实的家庭场景中,人形机器人必须不断调整全身姿态,才能在狭窄、杂乱的动态空间中探查、触及并操作物体。由于涉及全身高维度的协同控制,这对模型的零样本泛化能力提出了苛刻的要求。

对此,Figure 选择了整理客厅、折叠毛巾、铺床三项需要全身参与的家务进行测试,覆盖感知、移动、操作能力、双手协调以及全身控制等不同难点。

为保证评估标准一致,Figure 为三项任务分别设置了明确的时间限制和失败条件,其中若因安全原因发生人工介入,同样按失败处理。

  • 整理客厅:散落在地面的 13 至 15 个玩具必须全部识别捡起并放入收纳筐,漏掉一个即判失败;

  • 叠毛巾:所有毛巾均需在规定时间内完成折叠并整齐收纳进篮;

  • 铺床:两个枕头和被套两侧均需被拉至床头区域,并将褶皱被面整体拉平顺。

视频|一些场景被重置为不受控制的初始状态的例子,用于零样本评估。

这里值得我们细究的是“零样本”的边界和定义,它主要用于评估环境和操作对象:

  1. Figure 强调团队从未在 30 套被测住宅采集过训练数据;

  2. 测试使用的玩具、毛巾和床品在实验前被单独隔离,在实验开始前,经过模型筛查与人工复核,确保未出现在任务适配数据中;

  3. 机器人抵达现场后,不进行任何现场环境建模或权重微调,全凭离线习得的经验进行实时感知与控制。

  4. 为了避免“边测边挑、定向挑选最优模型”,每项家务均采用同一个固定模型版本跑满 30 套住宅,现场评测结果不作为后续模型筛选的依据。

视频|在 Index 数据集上预训练的 Helix 2.5 模型能够应对三种全身位置操控任务。

在这一严苛标准下,搭载 Helix 2.5 的机器人 Figure 03在 420 次尝试中成功 237 次,整体成功率为 56%。三项子任务的成绩呈现出明显的分布差异:

• 铺床:完成 94/140 次、达到 67%;

• 折叠毛巾:完成 87/140 次、为 62%;

• 整理玩具:只完成 56/140 次、降至 40%。

铺床与折叠毛巾的成功率均突破了 60%,原因在于这两项任务的操作目标相对单一,机器人在较为局限的工作空间内进行连续动作,误差扩散相对可控。

而整理客厅的成功率暴跌了 20 多个百分点,根源在于任务结构的根本差异:整理客厅包含大范围的自主移动、反复下蹲起立,以及长达 15 轮的重复抓取操作。

在极其漫长的时序链条中,任何一次识别漂移、走位偏离或滑脱,都会引发连锁反应导致任务崩溃。不过,由于 Figure 尚未公布分步骤的数据统计,目前尚无法量化主要失误集中在感知、导航还是末端抓取环节。


图|Index 预训练与随机初始化策略在 30 套住宅中的零样本成功率。

实验表明,Helix 2.5 能够在 30 套未见住宅中执行三项长时序任务,无需针对评估环境或被操作物体额外采集数据、微调或适配。Figure 称,这是首次在如此规模上实现人形机器人零样本全身行为泛化能力的演示。

9%到 56%,唯一变量是 Index

Helix 2.5 的泛化能力究竟来自具体家务的专项适配数据,还是源于Index 预训练?Figure 通过一组严格的控制变量实验给出了定论。

两组实验采用了完全一致的任务适配数据、网络架构、优化器、超参数与评估流程。唯一的区别在于:一组模型直接从随机权重开始训练,另一组则基于Index 预训练后的 Helix 2.5 权重进行初始化。

结果展现了悬殊的落差:随机初始化组的完整任务成功率仅为 9%,而 Index 预训练组达到了 56%,性能提升超过 6 倍。

视频|Helix 2.5 在执行定位操作以及主动感知任务时的定性行为表现。

面对这一结果,行业普遍关心的核心疑问是:Index 数据集里是不是悄悄塞进了大量“测试原题”?

为了验证模型是否在“背答案”,Figure 从视觉特征与文本语义两个维度对 Index 进行了聚类分析:

• 一方面直接提取每段视频的视觉表征;

• 另一方面让视觉语言模型为每个片段生成活动和物体描述,再将这些文字转成语义表征。

结果显示,铺床、折叠毛巾和整理客厅中的任何一项任务,在预训练数据中的占比都没有超过 1.90%。

这一数据有力地证明,评估任务并未主导预训练集。模型获得的并不是针对特定家务的流程记忆,而是人类在物理世界中沉淀的通用交互机理——例如如何接近障碍物、双臂协同发力、控制柔性形变以及根据重心调整下肢站位。

这些底层的物理经验,构成了跨场景泛化的坚实地基。

此外,与上一代 Helix 02 直接借用开源视觉语言模型(VLM)权重不同,Helix 2.5 彻底摆脱了外部 VLM 底座,完全从零在 Index 数据集上学习视觉、语言与物理动作的跨模态对齐。

Figure 还交出了三份"加分卷"

除了 30 套住宅的盲测数据,Figure 此次还同步披露了关于数据效率、行为涌现与 Scaling Law的三组扩展结论。

第一组是数据利用效率的大幅提升。

对比上一代依赖现场部署采集的 Helix 02,Helix 2.5 在下游任务适配中仅使用了一半的机器人专属数据,不仅在整体成功率上打平,更展现出了此前不具备的跨场景泛化能力。

第二组是定性行为层面的涌现:也就是自我纠错。

当抓取动作不理想或受阻时,机器人会自主后退、重新寻找站姿,甚至绕行到床的另一侧变换角度继续操作。对于长时序任务而言,这类错误恢复尤其重要。人类在训练时并没有教过机器人“犯错后如何补救”,但机器人却能根据物理反馈调整后续规划。

Figure 认为,这种从错误中恢复并继续推进任务的能力,是 Index 预训练带来的重要效果之一。

视频|全身错误恢复机制——机器人会后退一步,重新定位自己,然后围绕环境移动,以纠正错误并完成那些需要长期规划的任务。

第三组是首次在具身领域验证了人类经验的“迁移 Scaling Law”。

在固定模型参数规模与下游微调流程的前提下,Figure 将预训练数基于1-8个倍增档位,阶梯训练了四个不同数据档位的模型,观察模型在留出评估集上的动作预测损失。

实验呈现出严格符合幂律分布的下行曲线。更具工程价值的是其前向外推精度:研发团队仅依据小规模训练拟合出的趋势线,便能提前推演出最大规模下的模型损失收敛值,且实际观测值与预测值的偏差,仅相当于整个 8 倍区间损失变动幅度的0.54%。


图|仅利用小规模实验趋势线,即可提前预测 8× 训练损失,外推误差仅 0.54%

这证明在大语言模型上已被验证的 Scaling Law 同样适用于物理世界:将人类日常行为经验压缩进神经网络的过程,存在高度可量化、可预测的规模效应。团队无需盲目试错,在投入下一阶段数采与算力前,即可精确折算其对预训练表征的边际收益。

结 语

Figure 此次发布的亮点,并非又一场吸引眼球的机器人家务 Demo,而在于用严格的控制变量证明:人形机器人具备脱离现场微调、依靠人类物理常识实现跨场景迁移的工程可行性。

但 56% 同样冷峻地指出了当前的物理边界。它意味着在近一半的尝试中,任务依然以卡死、超时或安全中断收场;尤其整理客厅 40% 的表现,印证了多节点误差在长时序链条中存在累积效应。

资料参考:

Figure|Helix 2.5: Zero-Shot 30-Home Generalization(https://www.figure.ai/news/helix-2-5-zero-shot-30-home-generalization)

Brett Adcock|原始评估素材(https://x.com/adcock_brett/status/2100657393923445017)

声明:本文为 AI 前线原创,不代表平台观点,也不构成投资建议,未经许可禁止转载。

会议推荐

QCon 全球软件开发大会·2026(上海站)将于10 月 22 日—24 日举办。本届大会聚焦 Harness AI 时代的工程实践,从「构建 AI」到「驾驭 AI」,围绕AI Native 架构、Agent Runtime、AI Infra、Agent 安全与可观测、Loop Engineering、具身智能与世界模型等热门技术方向,邀请全球技术社区与产业一线实践者,共同分享 AI Native 时代最具价值的工程经验。查看更多详情可扫码或联系票务经理 18514549229 进行咨询。

今日荐文

你也「在看」吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
女子怒斥男网红出轨21人!晒聊天记录,却泄露男子下体照,6000多人已看过

女子怒斥男网红出轨21人!晒聊天记录,却泄露男子下体照,6000多人已看过

北京郑律师
2026-10-29 02:21:08
每年吃掉3000只蚊子,8年才能长大,却被人类作为美食大量捕捉

每年吃掉3000只蚊子,8年才能长大,却被人类作为美食大量捕捉

娱乐圈见解说
2026-10-28 01:41:32
大势定了!油价风向已经明确,下月开始,燃油车主躲不开三件事

大势定了!油价风向已经明确,下月开始,燃油车主躲不开三件事

笑熬浆糊111
2026-10-28 06:00:28
7人中国男足3-2非洲劲旅,避免了连续2轮U15世界杯落败

7人中国男足3-2非洲劲旅,避免了连续2轮U15世界杯落败

侧身凌空斩
2026-10-29 00:17:37
别再逼孩子运动了!哈佛大学研究发现:孩子最缺的不是篮球、游泳,而是“疯跑、打滚、爬树”等无序运动

别再逼孩子运动了!哈佛大学研究发现:孩子最缺的不是篮球、游泳,而是“疯跑、打滚、爬树”等无序运动

品读时刻
2026-10-27 09:05:45
姆巴佩自爆最爱换脸我国开国伟人涉辱华 蒙牛、东鹏饮料终止合作

姆巴佩自爆最爱换脸我国开国伟人涉辱华 蒙牛、东鹏饮料终止合作

环球趣闻分享
2026-10-27 14:05:12
金·卡戴珊拉四姐妹拍内衣广告,节日系列10月29日上线

金·卡戴珊拉四姐妹拍内衣广告,节日系列10月29日上线

娱圈观察员
2026-10-29 03:23:30
降温后发现,这3种“大妈色”尽量别穿了,显老土气,油腻感十足

降温后发现,这3种“大妈色”尽量别穿了,显老土气,油腻感十足

时尚穿搭生活馆
2026-10-27 23:20:29
我问了美院油画系的同学,王诗龄的绘画水平到底怎么样。同学轻轻叹气:我们最羡慕的,是她爷爷用画笔陪她长大。

我问了美院油画系的同学,王诗龄的绘画水平到底怎么样。同学轻轻叹气:我们最羡慕的,是她爷爷用画笔陪她长大。

背包旅行
2026-10-26 09:49:31
杨议风波升级!官媒下场发文锐评,言辞犀利,句句戳进郭德纲心窝

杨议风波升级!官媒下场发文锐评,言辞犀利,句句戳进郭德纲心窝

王觪晓
2026-10-28 08:38:10
活久见!30万年薪保安岗:洛阳钼业招100名驻外安保,地点刚果金,评论彻底沸腾

活久见!30万年薪保安岗:洛阳钼业招100名驻外安保,地点刚果金,评论彻底沸腾

火山詩话
2026-10-28 17:32:30
长得漂亮可坏事做尽,3次入狱,被摘除4处器官的她,如今过得怎样

长得漂亮可坏事做尽,3次入狱,被摘除4处器官的她,如今过得怎样

月下守候
2026-10-27 21:26:08
江浙沪地区是男人的天堂

江浙沪地区是男人的天堂

微微热评
2026-10-28 17:48:16
突然宣布结婚!今天的瓜,整个娱乐圈都羡慕不来

突然宣布结婚!今天的瓜,整个娱乐圈都羡慕不来

黎兜兜
2026-10-27 23:56:53
人社部重点严查五类退休人员!

人社部重点严查五类退休人员!

逍遥论经
2026-10-17 17:39:47
总有人抱有幻想,我再说一遍,就算失业在家玩,也不要开网约车!

总有人抱有幻想,我再说一遍,就算失业在家玩,也不要开网约车!

乌克兰小静
2026-10-28 07:31:42
面相寻常,难掩恶行,杀害反诈博主徽剑的凶手赵冰照片曝光

面相寻常,难掩恶行,杀害反诈博主徽剑的凶手赵冰照片曝光

笔杆论道
2026-10-28 11:34:21
张纪中妻子杜星霖在直播中说:“这年头能找到像我老公这样的人很难了”

张纪中妻子杜星霖在直播中说:“这年头能找到像我老公这样的人很难了”

韩小娱
2026-10-28 08:44:49
为什么说AI开源才是推动进步的聪明选择?

为什么说AI开源才是推动进步的聪明选择?

风铃草语
2026-10-28 07:18:39
张铭恩与女友路边争吵引热议,张铭恩发文:首先我先道歉不应该违章停车,澄清一下,她没有下跪

张铭恩与女友路边争吵引热议,张铭恩发文:首先我先道歉不应该违章停车,澄清一下,她没有下跪

韩小娱
2026-10-28 16:25:28
2026-10-29 05:24:49
AI前线 incentive-icons
AI前线
面向AI爱好者、开发者和科学家,提供AI领域技术资讯。
1782文章数 175关注度
往期回顾 全部

科技要闻

宇树科技前三季净利暴增270%

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

iPhone Duo七年等来一场吐槽大会

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

家居
数码
本地
公开课
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

苹果公布其首款触控MacBook Pro官方设计素材

本地新闻

十月奔赴迪庆,解锁梅里日照金山

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗最高领袖最新声明 提到了“结束战争”

无障碍浏览 进入关怀版