网易首页 > 网易号 > 正文 申请入驻

GPT-6 Astra上真机,RoboChallenge这次跑出了新东西

0
分享至


两项任务成功率达100%。

作者 | 周加琦

编辑 | 漠影

VLA一直是具身智能领域主流的技术路线之一。

它的逻辑是:给模型输入图像、语言指令,再利用大规模机器人示范数据训练模型直接预测动作。随着机器人数据规模的扩大,VLA可以完成抓取、整理等复杂的真实操作任务。

同时,通用大模型在多模态理解、空间推理和复杂任务规划能力的也在持续提升,一个新的问题随之出现:如果利用它这些已有能力,不用VLA模型,能不能参与并完成机器人的真实操作?

近日,原力灵机做了一次这样的实验。

该团队将GPT-6 Astra接入真机评测平台RoboChallenge Table30 V2,在Aloha、DOS-W1、ARX5和UR5四种机器人本体上分别测试四项真实操作任务。

从最终结果来看,四项任务中,GPT-6 Astra有两项成功率达到100%。

在真实执行的过程中,通用大模型不只是单纯地“输出动作”,而是会试探环境、理解操作结果、发现异常并修正。


01.

从屏幕走向真机,

原力灵机搭建真实评测闭环

验证通用大模型能不能真正参与机器人操作,光看模型在视觉理解、空间推理等Benchmark上的成绩不够。

机器人一旦进入真实环境,面对的不只是“看懂一张图”、“规划一个任务”。相机视角会变,目标可能被遮挡,抓取可能失败。所以,模型不仅要知道下一步该如何做,还要根据真实执行结果不断重新判断当前状态。

因此,原力灵机团队选择直接上真机测试。

此次测试使用的是RoboChallenge中的Table30 V2真机Benchmark。RoboChallenge由原力灵机联合Hugging Face发起,希望通过统一的真实机器人环境,对不同模型的操作能力进行测试。

Table30 V2共包含30个真实世界操作任务,覆盖双臂DOS-W1、Aloha和单臂ARX5、UR5四种机型,涉及物体整理、装箱、工具使用和双臂协作等任务。

与仿真环境测试不同,RoboChallenge让参评模型直接连接真实机器人。测试中,平台通过远程API与用户部署的模型推理服务交互,模型持续获取机器人图像和状态,生成动作并下发执行。

一次动作执行结束后,模型还会重新获取机器人图像和状态,并据此决定下一步如何操作。这样,模型面对的不是固定的输入,而是一个会因为自身动作不断变化的真实物理环境。

该团队在四种机器人本体上各选择了一项任务。其中Aloha完成“盖章定位”,需要一只机械臂固定纸张,另一只机械臂拿起印章、蘸取印泥并完成盖章;DOS-W1执行“叠碗”,按顺序将不同颜色的碗套叠起来。

ARX5完成“寻找绿块”,需要从场景中找到两个绿色方块,并依次放入指定篮子;UR5则操作“碎纸”,抓取纸张并送入碎纸机完成碎纸。四项任务分别涉及双臂协作、物体关系判断、目标搜索和工具使用等不同操作能力。


每项任务进行10次真机Rollout,按照平台记录的状态和步骤分,统计最终成功率与得分。

02.

四项真机测试,两项任务成功率达100%

四项任务中,GPT-6 Astra在“叠碗”和“寻找绿块”任务中的成功率均达到100%,“盖章定位”和“碎纸”任务成功率分别为80%、70%。

在RoboChallenge Table30 V2公开运行记录中,后两个任务的最高成功率均为50%,而GPT-6 Astra在这两项任务上的成功率分别高出30%和20%。


不过,成功率并不等于执行过程更优。GPT-6 Astra在“叠碗”、“寻找绿块”和“碎纸”上的得分均低于对应公开最高分。例如碎纸任务中,机器人虽然最终完成任务,但部分执行曾误夹起支架并因此被扣分;叠碗过程中也出现过多次重试。

当然,这也反映出GPT-6 Astra并不是“一次做对”,而是依靠持续观察和调整,把已经出现偏差的任务继续做完。

03.

不只执行动作,

GPT-6 Astra还会根据结果动态调整

首先,GPT-6 Astra会通过实际动作不断补全对空间关系的理解。

在UR5碎纸任务中,该团队并没有向GPT-6 Astra提供显式的相机标定信息。模型一开始并不知道机械臂沿某个方向移动后,在不同相机画面中会产生怎样的变化。

实际执行时,Astra会先做几个小幅试探动作,再对比动作前后的图像变化,逐步判断机械臂的运动方向,以及夹爪与目标之间的相对位置。也就是说,它不是依赖预先给定的空间映射,而是在操作过程中,通过“动作—观察—再判断”建立局部的视觉与运动对应关系。


除了补全空间关系,Astra也会根据场景变化调整原来的操作顺序。

在“寻找绿块”任务中,当绿色目标受到其他方块遮挡时,模型不会持续重复原来的抓取动作,而是先处理遮挡物。测试中,Astra会先夹走紫方块,等第二个绿色方块暴露后,再调整夹爪位置,重新接近目标。


当动作本身出现偏差时,模型还会根据新的结果进行调整。

同样是在“寻找绿块”任务中,Astra一次抬起夹爪后发现绿色方块仍留在桌面,说明此前抓取并未成功。随后,模型重新张开夹爪、降低抓取位置并再次对准,直到确认方块已经离开桌面,再将其放入篮中。

UR5碎纸任务中也出现了类似情况。由于缺少侧面视角,机器人有时会把纸张下方的支架一起夹起。Astra在重新观察画面后识别出这一偏差,随后放下支架、重新调整位置,再次抓取纸张。


在双臂任务中,Astra还会借助参考信息组织多步骤动作,同时处理示例之外的变化。

原力灵机团队发现,在完全不提供示例的情况下,双臂任务对Astra较为困难,因此在“盖章”和“叠碗”任务中加入了RoboChallenge提供的参考轨迹作为上下文。

这些参考轨迹主要帮助模型理解两只机械臂如何分工、什么时候交替操作。但真实执行中仍会出现参考轨迹之外的情况。例如盖章过程中,印章可能意外脱离夹爪,Astra需要重新抓取;叠碗时,模型也需要在保留已有堆叠结果的情况下,重新尝试后续操作。



参考轨迹更像是在给模型一个任务组织框架,面对实际执行中的新情况,Astra仍然需要根据当前状态继续调整。

综合来看,GPT-6 Astra此次在真机上的特点主要体现在可持续判断当前状态,并根据执行结果调整下一步。

相比VLA模型,这次测试中的通用大模型更多承担了任务理解、状态判断和异常处理的角色。不过,在操作效率、稳定性和动作精度上,它仍有明显提升空间。

04.

结语:通用大模型

正在降低机器人智能的门槛

过去,机器人要获得复杂任务理解和决策能力,往往需要围绕特定本体、特定任务持续积累数据并训练策略。通用大模型的发展,则提供了另一种路径:部分更高层的理解和决策能力,可以直接从通用模型中获得。

这意味着,具身智能系统不必从零开始构建所有能力。随着通用模型能力继续增强,机器人模型可以把更多精力放在精确控制、稳定执行和效率优化上。

对行业来说,这可能会降低机器人获得更高阶智能能力的门槛,也让更多本体和应用能够站在通用模型提供的基础能力之上继续开发。

原力灵机这次测试提供了一个真机层面的验证:通用大模型正在从“会理解”进一步走向“能参与操作”,具身智能的技术边界也有了新的拓展空间。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
阿里纳斯:马克西不会为布朗的私人恩怨让路

阿里纳斯:马克西不会为布朗的私人恩怨让路

赛场速报局
2026-10-28 01:10:37
103人进山背粮,没一个活着走出来:吞片山谷那天到底发生了什么

103人进山背粮,没一个活着走出来:吞片山谷那天到底发生了什么

纪史行者
2026-10-27 06:15:04
37名船工帮3万红军渡金沙江,渡江后毛主席为何特意下令:工钱补发,一个不能少

37名船工帮3万红军渡金沙江,渡江后毛主席为何特意下令:工钱补发,一个不能少

纪史行者
2026-10-10 03:20:10
现在很多高收入的夫妻特别清醒:住在小房子里,一辆车开十几年

现在很多高收入的夫妻特别清醒:住在小房子里,一辆车开十几年

富书
2026-10-28 12:36:36
南京同曦:总经理赛前说一个篮板500块,于是杜润旺抢了八个

南京同曦:总经理赛前说一个篮板500块,于是杜润旺抢了八个

懂球帝
2026-10-28 08:15:06
美62岁千亿阔太整容过度变“蜥蜴人”?与丈夫豪捐百亿压不住负评,网友:花钱故意整丑?

美62岁千亿阔太整容过度变“蜥蜴人”?与丈夫豪捐百亿压不住负评,网友:花钱故意整丑?

英国报姐
2026-10-29 00:15:44
票房6.65亿,连续一周登顶冠军,周星驰梁家辉被朱一龙打懵了

票房6.65亿,连续一周登顶冠军,周星驰梁家辉被朱一龙打懵了

影视高原说
2026-10-28 17:03:52
美国急了,日本急了,菲律宾腿抖了,英法德沉默了。因为他们发现,中国的潜力不止眼前大家看到的这点东西

美国急了,日本急了,菲律宾腿抖了,英法德沉默了。因为他们发现,中国的潜力不止眼前大家看到的这点东西

扶苏聊历史
2026-10-28 14:06:44
中国当前最危险的,可能不是台湾,更不是美日!真正致命的,是一双藏在暗处的手,正在不声不响地扼住我们的咽喉

中国当前最危险的,可能不是台湾,更不是美日!真正致命的,是一双藏在暗处的手,正在不声不响地扼住我们的咽喉

扶苏聊历史
2026-10-12 10:16:50
西班牙列车相撞致至少50人死亡,西班牙王室发声:悲痛、担忧

西班牙列车相撞致至少50人死亡,西班牙王室发声:悲痛、担忧

环球网资讯
2026-10-28 19:43:13
弹尽粮绝的不是俄罗斯,泽连斯基总算道出真相,乌克兰被彻底掏空

弹尽粮绝的不是俄罗斯,泽连斯基总算道出真相,乌克兰被彻底掏空

聊历史的阿稼
2026-10-24 07:17:22
他是张雪师傅,曾借张雪40万,如今收获豪车和股份,后半辈子躺赢

他是张雪师傅,曾借张雪40万,如今收获豪车和股份,后半辈子躺赢

法老不说教
2026-10-28 18:17:49
国务院定调,减缓人工智能的应用。全都是机器人了,大量人工下岗,没有工作,没有收入,谁去消费?

国务院定调,减缓人工智能的应用。全都是机器人了,大量人工下岗,没有工作,没有收入,谁去消费?

扶苏聊历史
2026-10-26 16:14:21
公务员到什么级别,才算真正走上领导岗位?

公务员到什么级别,才算真正走上领导岗位?

一口娱乐
2026-10-27 07:03:28
一天四箭齐发!军报:随时准备打仗灭台独,台岛精细卫星图公布了

一天四箭齐发!军报:随时准备打仗灭台独,台岛精细卫星图公布了

这样子啊
2026-10-27 22:33:19
马云预言又应验!若无意外,2026年起,中国房地产或迎来3大转变

马云预言又应验!若无意外,2026年起,中国房地产或迎来3大转变

社会日日鲜
2026-05-02 09:45:05
一场3-2,上演补时绝杀,科瓦奇神换人:替补神兵任意球破门

一场3-2,上演补时绝杀,科瓦奇神换人:替补神兵任意球破门

足球狗说
2026-10-28 05:58:43
英达家底被小儿子戳破,英如镝反复聊巴图,想认大哥哥的真相来了

英达家底被小儿子戳破,英如镝反复聊巴图,想认大哥哥的真相来了

琴琴有氧运动
2026-10-28 11:35:40
一夜多了近两万人,红军这笔“买卖”到底划不划算?一支军团用六年给出了答案

一夜多了近两万人,红军这笔“买卖”到底划不划算?一支军团用六年给出了答案

纪史行者
2026-10-29 00:15:03
为统一做准备?趁着美国搅动台海,中国在福建成立了一个神秘机构

为统一做准备?趁着美国搅动台海,中国在福建成立了一个神秘机构

文史道
2026-09-17 08:58:34
2026-10-29 03:31:00
机器人前瞻
机器人前瞻
智东西AI媒体矩阵品牌。机器人前瞻,机器人产业新媒体,专注报道全球机器人创新。
1014文章数 20关注度
往期回顾 全部

科技要闻

宇树科技前三季净利暴增270%

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

iPhone Duo七年等来一场吐槽大会

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

游戏
本地
手机
时尚
公开课

盖世小鸡推出《GTA6》配色手柄 但疑似没有联动

本地新闻

十月奔赴迪庆,解锁梅里日照金山

手机要闻

华为Pura90 Plus、畅享100系列发布!多款新品亮相

10位顶流男明星比惨,给我惹哭了

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版