网易首页 > 网易号 > 正文 申请入驻

刷新权威榜单!ACE-Ego 解锁“以人为中心”具身模型训练新范式

0
分享至

近日,大晓机器人联合香港中文大学多媒体实验室(CUHK MMLab)正式发布全新“一脑多型”具身操作VLA模型 ACE-Ego,并向行业开源。

作为“以人为中心”ACE 研发范式在具身模型预训练的核心落地成果,ACE-Ego提出大规模第一视角人类视频与多型机器人数据高效联合预训练的新范式,在两大国际权威具身智能基准上双双领先,并在复杂零售场景中展现出强泛化落地能力,为具身操作模型的规模化演进开辟了全新路径。



在国际公认的人形机器人操作基准 RoboCasa GR1 TableTop 上,ACE-Ego 以72.8%的平均成功率刷新当前最高纪录,夺得榜首,大幅超越英伟达 GR00T、PI π₀.₅、京东JoyAI-RA 等主流模型;在高难度双臂操作基准 RoboTwin 2.0 的强域随机化测试中,ACE-Ego 以90.62%的成功率展现出远超行业平均水平的环境鲁棒性。

2025年12月,大晓机器人提出“以人为中心(Human-centric)” 的ACE具身研发范式,将人类与物理世界的互动规律作为核心研究起点,构建了一套从“环境式数据采集—开悟世界模型3.0—具身交互”的全链路技术体系。源于对 “以人为中心” ACE 范式的深度践行,不同于行业传统 “以机器为中心”、依赖大批量高成本真机遥操作数据的路线,ACE-Ego 将海量低成本的第一视角人类视频转化为可用于模型训练的有效监督信号。通过统一相机空间动作表示、统一本体形态编码、时间对齐动态分块、可靠性自适应目标函数四大核心机制,它系统性破解了人与不同型号机器人数据在空间坐标系、本体结构、时序频率、标签质量上的四重异构难题,实现使用大规模高质量人类第一视角视频与数千小时多机型机器人数据的协同训练。

实验结果证实了大规模第一视角人类视频能够有效提升VLA模型预训练和下游适配能力:在 RoboCasa 基准上,引入第一视角人类视频进行联合预训练,相比于仅使用机器人数据进行预训练,模型成功率从 68.3% 提升至 72.8%,实现了4.5%的显著性能跨越。充分证明了“以人为中心”的大规模数据预训练对提升具身模型泛化能力的巨大价值。

目前,ACE-Ego 已能稳定完成塑料袋打包、鞋子装入鞋盒等长周期、强接触的复杂零售操作,覆盖商品整理、打包履约等典型线下零售环节,突破了此前模型仅能完成简单桌面抓取的能力边界,为具身智能走向产业规模化落地提供了高性价比的技术方案。

刷新两大国际具身智能基准,全面领跑通用操作模型

ACE-Ego 在RoboCasa GR1 TableTop 与 RoboTwin 2.0 两大国际权威具身智能基准上取得SOTA成绩,显著超越英伟达 GR00T、PI π₀.₅、京东JoyAI-RA、蚂蚁灵波LingBot-VLA、高德ABot-M0、小鹏DIAL等多款主流通用机器人模型。

在 RoboCasa GR1 TableTop 人形桌面操作基准上,ACE-Ego 实现72.8%的平均成功率,大幅刷新榜单纪录。该基准基于 GR1 人形机器人平台设置 24 项典型家庭任务,涵盖18项抓取放置重排与6项铰接物体交互,是衡量人形机器人通用操作能力的核心标尺。



测试结果显示,ACE-Ego 较第二名 小鹏DIAL模型(70.2%)任务成功率提升 2.6%,较英伟达 GR00T-N1.6(47.6%)提升达25.2%,同时全面领先 京东JoyAI-RA(63.2%)、高德ABot-M0(58.3%)、FLARE(55.0%)等主流模型。性能增益覆盖抓取放置、铰接操作全品类任务,其中盘子叠放、托盘移锅等任务成功率突破98%,证明其能力提升来自框架底层优化,而非特定任务过拟合。

在 RoboTwin 2.0 双臂操作基准中,ACE-Ego 同样稳居VLA类模型榜首,展现出极强的环境鲁棒性。该基准包含50项覆盖抓取、放置、工具使用、双臂协同的复杂任务,设置干净场景(Easy)与强域随机化场景(Hard)两种模式,其中 Hard 模式随机改变光照、纹理、物体位置等条件,高度模拟真实世界不确定性。

ACE-Ego 在 Easy 模式下成功率达 91.12%,Hard 模式达 90.62%,超越腾讯混元Hy-VLA(90.9%/90.1%)、 京东JoyAI-RA(90.48%/89.28%)、蚂蚁灵波LingBot-VLA(88.56%/86.68%)、PI π₀.₅(82.74%/76.76%)、生数Motus(88.66%/87.02%)、高德ABot-M0 (86.06%/85.08%)等对比模型。



从干净场景到强随机化场景,ACE-Ego 性能仅衰减0.5个百分点,远低于行业平均水平,意味着其习得技能具备极强的环境适应性,更贴近真实商业部署要求。

零售场景全链路落地验证,实操能力解锁商业价值

从鞋盒规整入盒、咖啡定量分装,再到柔性塑料袋打包,ACE-Ego 在典型零售场景中展现出全栈式真实操作能力,覆盖商品陈列、履约打包、货品分拣等线下零售核心作业环节。

机械臂精准识别鞋盒与双鞋的空间位置,按照零售场景的标准陈列方位将鞋依次平稳放入盒内;随后精准定位鞋盒翻盖的铰链转轴与边缘,沿自然合盖轨迹平稳完成翻盖扣合,全程无碰撞、无挤压,展现出对铰接类物体的几何操作理解与精准空间定位能力。

机械臂抓取咖啡勺后,从敞口咖啡罐中平稳舀取定量咖啡豆,抬臂、平移、对准杯口一气呵成,精准控制倾倒角度与速度将咖啡豆全部注入杯中,全程无撒漏。整套长时序操作连贯流畅,体现模型对长程动作序列的规划能力与末端执行的精细对准精度。

机械臂抓取轻薄购物塑料袋的袋口,顺势撑开袋身形成稳定容纳空间,将目标物品平稳放入袋中后收紧袋口完成打包。全程应对塑料袋柔软易变形、无固定形态的特性,实现了柔性物体的稳定抓取与形态操控。

四大核心机制破局异构融合,解锁人机协同预训练新范式

双榜登顶与下游任务高效适配的卓越表现,源于 ACE-Ego 依托“以人为中心”的研发范式,对具身智能行业痛点实现的重大技术突破。面对人-机数据在空间、结构、时间、训练监督信号四个维度严重不匹配的行业挑战,ACE-Ego 创新构建了“大规模人类第一人称视频 + 多具身机器人数据”的全链路融合方案。通过自研的四大核心机制,ACE-Ego 分别从空间、结构、时间以及训练监督四个维度统一表示与对齐,彻底破解了人机数据不兼容的难题。这四大机制并行发力,成功支撑了大规模人机异构数据的同框训练,将具身操作模型推入多源协同预训练的新阶段。

机制一:第一视角统一动作空间表达,让不同人与不同机型的动作 “说同一种语言”。ACE-Ego 以头部相机坐标系为统一基准,将多机型机器人末端执行器轨迹、不同人类视角视频重建的手部运动全部投影到机器人 “第一视角” 下,让动作指令与视觉观测对齐至统一坐标系,免去跨平台复杂坐标校准,新本体部署仅需替换一组相机外参。针对人类视频,团队搭建多阶段处理管线,覆盖原始筛选、3D 手部重建、参数化映射与多轮质量过滤等数据构建机制,最终输出与机器人完全同构的动作向量,实现数据格式层面的无缝兼容。

机制二:URDF(统一机器人描述格式) 本体形态映射,让模型知晓 “谁在做动作”。不同机器人的关节结构、物理尺寸差异巨大,人体运动模式与机器人更是截然不同。为此,ACE-Ego 创新性地将 URDF(统一机器人描述格式)映射为跨本体的统一中间层编码。对于机器人,它通过解析 URDF 文件将运动学特征编码并输入动作解码器;对于人类数据,则通过学习专属的“代理形态嵌入”来模拟人体结构。这种“形态条件”仅在动作解码阶段注入,不干扰视觉语言主干网络,不仅保留了主干网络强大的通用视觉理解能力,更带来了极快的新机适配速度——在面对 ARX 双臂机器人等全新未知机型时,仅需不到 200 条动作数据,即可在极短时间内完成适配部署。

机制三:时间对齐动态分块,让不同“手速”数据步调一致。不同机器人平台控制频率从10Hz到30Hz不等,固定帧数的动作块对应物理时长差异显著,直接混训会扰乱时序逻辑。ACE-Ego 打破按帧切分的传统做法,以物理时长为标准划分动作块,确保所有数据源预测相同时长的未来动作窗口;搭配分桶采样策略,按任务类型、时序阶段、块长组合成批,大幅降低填充开销,稳定梯度更新,让跨频率数据的联合训练平稳落地。

机制四:可靠性自适应目标函数,带噪声数据“按需采信”。人类视频数据中的动作标签由视觉算法重建获得,动作标签带有一定重建噪声,若与高精度传感器数据同权训练反而会拉低模型精度。ACE-Ego 设计了双层训练目标体系:机器人传感器数据作为“准确”监督信号,全权重锚定核心控制精度;人类采集动作作为重要多样性补充信号也参与训练,实行三级加权机制 —— 通道级重点采信高可靠位置信号,数据集级按重建质量设置权重上限,帧级通过运动平滑度动态过滤异常片段。这套 “信息过滤器” 既充分释放了大规模人类视频场景的多样性潜力与行为广度,又牢牢守住机器人高精度数据的质量底线。

四大机制环环相扣,打通了 “人类视频规模化扩量 + 机器人数据保障精度” 的全新技术路径,为具身操作模型的规模化训练打开了成本与规模的双重增长空间。

大晓机器人将继续深化“以人为中心”的 ACE 研发范式,将这一套高效的人机协同预训练方法推广至更广阔的空间。在模型层面,ACE-Ego模型系列将进一步融合视觉-语言-动作(VLA)模型和具身世界模型(WAM),赋予机器人更强的物理世界想象力与预测能力;在应用层面,该范式也将从当前的复杂零售场景,加速拓展至工业产线、柔性制造等更多高精尖实体产业场景,以高性价比、高泛化性的技术路径,全面加速具身智能的规模化商业落地。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
重磅!李月汝无缘WCBA常规赛,禁止双联赛连轴转,中国篮球任重道远!

重磅!李月汝无缘WCBA常规赛,禁止双联赛连轴转,中国篮球任重道远!

体坛卡卡说
2026-11-03 17:24:05
万万没想到:固态电池还没出现,比亚迪就搞定了1100km的纯电续航

万万没想到:固态电池还没出现,比亚迪就搞定了1100km的纯电续航

云霄纪史观
2026-11-04 03:03:54
一个家庭旺不旺,不看存款、不看房车,而是看这四样,有一个就很了不起!

一个家庭旺不旺,不看存款、不看房车,而是看这四样,有一个就很了不起!

诗词天地
2026-11-03 06:02:02
央视再曝新毒物!市监局证实,流窜全国致癌极高,家家户户都会用

央视再曝新毒物!市监局证实,流窜全国致癌极高,家家户户都会用

北海史记
2026-11-02 17:37:32
楼市开始离谱了!上海的房价,可能会迎来新一轮洗牌,很现实!

楼市开始离谱了!上海的房价,可能会迎来新一轮洗牌,很现实!

明天见灌装冰块
2026-11-03 19:52:38
“卖导弹的小姐姐”,有新消息!

“卖导弹的小姐姐”,有新消息!

极目新闻
2026-11-03 16:47:32
逛跳蚤市场捡大漏!10欧买的“假玩具”戴了30年,竟是65万欧元稀有大钻

逛跳蚤市场捡大漏!10欧买的“假玩具”戴了30年,竟是65万欧元稀有大钻

意大利华人网0039
2026-11-01 16:23:54
徽剑案境外雇主拼命打捞赵冰的真相:替我办事出事我兜着,哪里是善后,是立规矩

徽剑案境外雇主拼命打捞赵冰的真相:替我办事出事我兜着,哪里是善后,是立规矩

小徐讲八卦
2026-11-02 14:33:20
四川一个县,人口还没东部一个村多,全县2万多人养着一整套班子

四川一个县,人口还没东部一个村多,全县2万多人养着一整套班子

云霄纪史观
2026-11-02 13:51:15
随着国锦赛八强出炉,诞生4个不争的事实,范争一晋级希望最大

随着国锦赛八强出炉,诞生4个不争的事实,范争一晋级希望最大

南海浪花
2026-11-04 05:04:04
6-5!丁俊晖霸气挥拳庆祝,中国斯诺克迎来盛势:或包揽国锦赛4强

6-5!丁俊晖霸气挥拳庆祝,中国斯诺克迎来盛势:或包揽国锦赛4强

陌识
2026-11-04 05:33:08
FBI确认:币安63亿美元被盗案,朝鲜是幕后黑手

FBI确认:币安63亿美元被盗案,朝鲜是幕后黑手

深蓝财经
2026-11-01 21:16:43
澳门这一夜,何超琼一件80年代旧礼服,诠释了啥才叫“黄金时代”

澳门这一夜,何超琼一件80年代旧礼服,诠释了啥才叫“黄金时代”

铁锤妹妹是只猫
2026-11-04 01:59:31
受贿数额特别巨大!郭学益被提起公诉!

受贿数额特别巨大!郭学益被提起公诉!

看看新闻Knews
2026-11-03 12:31:21
17分大逆转,勇士5连胜迎4大喜讯!1年285万淘到宝 库里可算熬出头

17分大逆转,勇士5连胜迎4大喜讯!1年285万淘到宝 库里可算熬出头

锅子篮球
2026-11-03 16:07:14
专家大胆预言:2029年中国房价,很大可能是这样,大家要有准备!

专家大胆预言:2029年中国房价,很大可能是这样,大家要有准备!

铭记历史呀
2026-11-04 02:28:35
男子当妻子面强奸小姨子,要求三人同寝共乐,老农忍辱8年怒杀婿

男子当妻子面强奸小姨子,要求三人同寝共乐,老农忍辱8年怒杀婿

易玄
2026-11-02 13:14:38
28.4+12.3!年薪超6200万!联盟最悲情的巨星,若选勇士早已起飞

28.4+12.3!年薪超6200万!联盟最悲情的巨星,若选勇士早已起飞

球盲姐
2026-11-03 15:22:34
扬州经济技术开发区开发(集团)有限公司党委书记、董事长刘震接受纪律审查和监察调查

扬州经济技术开发区开发(集团)有限公司党委书记、董事长刘震接受纪律审查和监察调查

上观新闻
2026-11-03 16:04:46
孙芸芸被曝与丈夫分居婚变,回应称生活没变,在国外帮女儿带孩子

孙芸芸被曝与丈夫分居婚变,回应称生活没变,在国外帮女儿带孩子

史料布籍
2026-11-02 20:34:58
2026-11-04 06:16:49
止戈见闻
止戈见闻
关注科技与商业的脉动
175文章数 0关注度
往期回顾 全部

科技要闻

马斯克也哭穷!Grok Bot额度暴跌

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

头条要闻

金价大跌 商家:今年最少亏100万 甚至有人亏几千万

体育要闻

领意甲最低的工资,踢着最幸福的足球

娱乐要闻

巴图自曝已改姓后,英如嫡直播摊牌

财经要闻

巨额开支"难落地" 美国数据中心建设遇阻

汽车要闻

可油可甲醇/每公里成本2毛 银河星耀6EF焕新价7.68万起

态度原创

数码
家居
健康
教育
军事航空

数码要闻

Xbox Nano手柄隐藏云游戏功能 未来可直接通过Wi-Fi连接微软服务器

家居要闻

2026建博会(广州) 公装联探展交流活动

痘痘长到25岁还没完?查查内分泌

教育要闻

第43届物理竞赛金银铜牌名单公布!国集江苏3人全部来自南师附中!

军事要闻

美官员称美袭击伊朗格什姆岛

无障碍浏览 进入关怀版