网易首页 > 网易号 > 正文 申请入驻

GPT-6 Astra上真机,RoboChallenge这次跑出了新东西

0
分享至


两项任务成功率达100%。

作者 | 周加琦

编辑 | 漠影

VLA一直是具身智能领域主流的技术路线之一。

它的逻辑是:给模型输入图像、语言指令,再利用大规模机器人示范数据训练模型直接预测动作。随着机器人数据规模的扩大,VLA可以完成抓取、整理等复杂的真实操作任务。

同时,通用大模型在多模态理解、空间推理和复杂任务规划能力的也在持续提升,一个新的问题随之出现:如果利用它这些已有能力,不用VLA模型,能不能参与并完成机器人的真实操作?

近日,原力灵机做了一次这样的实验。

该团队将GPT-6 Astra接入真机评测平台RoboChallenge Table30 V2,在Aloha、DOS-W1、ARX5和UR5四种机器人本体上分别测试四项真实操作任务。

从最终结果来看,四项任务中,GPT-6 Astra有两项成功率达到100%。

在真实执行的过程中,通用大模型不只是单纯地“输出动作”,而是会试探环境、理解操作结果、发现异常并修正。


01.

从屏幕走向真机,

原力灵机搭建真实评测闭环

验证通用大模型能不能真正参与机器人操作,光看模型在视觉理解、空间推理等Benchmark上的成绩不够。

机器人一旦进入真实环境,面对的不只是“看懂一张图”、“规划一个任务”。相机视角会变,目标可能被遮挡,抓取可能失败。所以,模型不仅要知道下一步该如何做,还要根据真实执行结果不断重新判断当前状态。

因此,原力灵机团队选择直接上真机测试。

此次测试使用的是RoboChallenge中的Table30 V2真机Benchmark。RoboChallenge由原力灵机联合Hugging Face发起,希望通过统一的真实机器人环境,对不同模型的操作能力进行测试。

Table30 V2共包含30个真实世界操作任务,覆盖双臂DOS-W1、Aloha和单臂ARX5、UR5四种机型,涉及物体整理、装箱、工具使用和双臂协作等任务。

与仿真环境测试不同,RoboChallenge让参评模型直接连接真实机器人。测试中,平台通过远程API与用户部署的模型推理服务交互,模型持续获取机器人图像和状态,生成动作并下发执行。

一次动作执行结束后,模型还会重新获取机器人图像和状态,并据此决定下一步如何操作。这样,模型面对的不是固定的输入,而是一个会因为自身动作不断变化的真实物理环境。

该团队在四种机器人本体上各选择了一项任务。其中Aloha完成“盖章定位”,需要一只机械臂固定纸张,另一只机械臂拿起印章、蘸取印泥并完成盖章;DOS-W1执行“叠碗”,按顺序将不同颜色的碗套叠起来。

ARX5完成“寻找绿块”,需要从场景中找到两个绿色方块,并依次放入指定篮子;UR5则操作“碎纸”,抓取纸张并送入碎纸机完成碎纸。四项任务分别涉及双臂协作、物体关系判断、目标搜索和工具使用等不同操作能力。


每项任务进行10次真机Rollout,按照平台记录的状态和步骤分,统计最终成功率与得分。

02.

四项真机测试,两项任务成功率达100%

四项任务中,GPT-6 Astra在“叠碗”和“寻找绿块”任务中的成功率均达到100%,“盖章定位”和“碎纸”任务成功率分别为80%、70%。

在RoboChallenge Table30 V2公开运行记录中,后两个任务的最高成功率均为50%,而GPT-6 Astra在这两项任务上的成功率分别高出30%和20%。


不过,成功率并不等于执行过程更优。GPT-6 Astra在“叠碗”、“寻找绿块”和“碎纸”上的得分均低于对应公开最高分。例如碎纸任务中,机器人虽然最终完成任务,但部分执行曾误夹起支架并因此被扣分;叠碗过程中也出现过多次重试。

当然,这也反映出GPT-6 Astra并不是“一次做对”,而是依靠持续观察和调整,把已经出现偏差的任务继续做完。

03.

不只执行动作,

GPT-6 Astra还会根据结果动态调整

首先,GPT-6 Astra会通过实际动作不断补全对空间关系的理解。

在UR5碎纸任务中,该团队并没有向GPT-6 Astra提供显式的相机标定信息。模型一开始并不知道机械臂沿某个方向移动后,在不同相机画面中会产生怎样的变化。

实际执行时,Astra会先做几个小幅试探动作,再对比动作前后的图像变化,逐步判断机械臂的运动方向,以及夹爪与目标之间的相对位置。也就是说,它不是依赖预先给定的空间映射,而是在操作过程中,通过“动作—观察—再判断”建立局部的视觉与运动对应关系。


除了补全空间关系,Astra也会根据场景变化调整原来的操作顺序。

在“寻找绿块”任务中,当绿色目标受到其他方块遮挡时,模型不会持续重复原来的抓取动作,而是先处理遮挡物。测试中,Astra会先夹走紫方块,等第二个绿色方块暴露后,再调整夹爪位置,重新接近目标。


当动作本身出现偏差时,模型还会根据新的结果进行调整。

同样是在“寻找绿块”任务中,Astra一次抬起夹爪后发现绿色方块仍留在桌面,说明此前抓取并未成功。随后,模型重新张开夹爪、降低抓取位置并再次对准,直到确认方块已经离开桌面,再将其放入篮中。

UR5碎纸任务中也出现了类似情况。由于缺少侧面视角,机器人有时会把纸张下方的支架一起夹起。Astra在重新观察画面后识别出这一偏差,随后放下支架、重新调整位置,再次抓取纸张。


在双臂任务中,Astra还会借助参考信息组织多步骤动作,同时处理示例之外的变化。

原力灵机团队发现,在完全不提供示例的情况下,双臂任务对Astra较为困难,因此在“盖章”和“叠碗”任务中加入了RoboChallenge提供的参考轨迹作为上下文。

这些参考轨迹主要帮助模型理解两只机械臂如何分工、什么时候交替操作。但真实执行中仍会出现参考轨迹之外的情况。例如盖章过程中,印章可能意外脱离夹爪,Astra需要重新抓取;叠碗时,模型也需要在保留已有堆叠结果的情况下,重新尝试后续操作。



参考轨迹更像是在给模型一个任务组织框架,面对实际执行中的新情况,Astra仍然需要根据当前状态继续调整。

综合来看,GPT-6 Astra此次在真机上的特点主要体现在可持续判断当前状态,并根据执行结果调整下一步。

相比VLA模型,这次测试中的通用大模型更多承担了任务理解、状态判断和异常处理的角色。不过,在操作效率、稳定性和动作精度上,它仍有明显提升空间。

04.

结语:通用大模型

正在降低机器人智能的门槛

过去,机器人要获得复杂任务理解和决策能力,往往需要围绕特定本体、特定任务持续积累数据并训练策略。通用大模型的发展,则提供了另一种路径:部分更高层的理解和决策能力,可以直接从通用模型中获得。

这意味着,具身智能系统不必从零开始构建所有能力。随着通用模型能力继续增强,机器人模型可以把更多精力放在精确控制、稳定执行和效率优化上。

对行业来说,这可能会降低机器人获得更高阶智能能力的门槛,也让更多本体和应用能够站在通用模型提供的基础能力之上继续开发。

原力灵机这次测试提供了一个真机层面的验证:通用大模型正在从“会理解”进一步走向“能参与操作”,具身智能的技术边界也有了新的拓展空间。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
俄罗斯专家把话挑明了:如果中国铁了心要对日本动手,那就只有两个选择,要么不出手,要么一击毙命!

俄罗斯专家把话挑明了:如果中国铁了心要对日本动手,那就只有两个选择,要么不出手,要么一击毙命!

回京历史梦
2026-10-11 16:35:06
湖北省最宜居城市有哪些?

湖北省最宜居城市有哪些?

小影的娱乐
2026-10-28 13:37:09
英国球手炮轰斯诺克南京国锦赛:一天双赛不公平,中国球员获优待

英国球手炮轰斯诺克南京国锦赛:一天双赛不公平,中国球员获优待

杨华评论
2026-10-28 22:01:35
媒体就该起到监督作用,孙玉良:需要唱赞歌,请把这个权利给人民

媒体就该起到监督作用,孙玉良:需要唱赞歌,请把这个权利给人民

孙玉良
2026-09-05 08:29:19
基于一中原则,巴基斯坦禁止台湾航空飞越领空,民进党反应亮了

基于一中原则,巴基斯坦禁止台湾航空飞越领空,民进党反应亮了

DS北风
2026-10-29 03:26:07
美联储维持利率不变后 美股小幅回吐涨幅

美联储维持利率不变后 美股小幅回吐涨幅

证券时报
2026-10-29 02:25:01
不出意外,2027年开始,按摩店、足疗店、洗浴店将迎来“大变局”

不出意外,2027年开始,按摩店、足疗店、洗浴店将迎来“大变局”

云霄纪史观
2026-10-25 02:08:15
预测二零二六中超赛季成都蓉城可能会客场零比七惨败山东泰山并以最耻辱的方式夺得冠军

预测二零二六中超赛季成都蓉城可能会客场零比七惨败山东泰山并以最耻辱的方式夺得冠军

体育全天候
2026-10-28 17:08:36
泰勒·斯威夫特红色紧身衣卖断货,亚马逊12美元同款被抢疯

泰勒·斯威夫特红色紧身衣卖断货,亚马逊12美元同款被抢疯

浅遇时光
2026-10-28 03:41:36
上海警方:全市严查!一区配备5台警用无人机,近期多人被罚款

上海警方:全市严查!一区配备5台警用无人机,近期多人被罚款

环球网资讯
2026-10-28 10:13:36
她曾睡遍才子大佬,前半生阅男无数,晚年无人陪伴,如今独居广州

她曾睡遍才子大佬,前半生阅男无数,晚年无人陪伴,如今独居广州

铜臭的历史味
2026-10-13 11:28:57
继手伸进裤子后,48岁刘涛被当众摸胸,全程赔笑不敢怒,多人遭殃

继手伸进裤子后,48岁刘涛被当众摸胸,全程赔笑不敢怒,多人遭殃

小鋭有话说
2026-10-28 21:37:50
德约科维奇2-1逆转安贝尔,晋级ATP500巴塞尔站次轮

德约科维奇2-1逆转安贝尔,晋级ATP500巴塞尔站次轮

懂球帝
2026-10-29 02:05:07
苏联最后元帅的临终前劝诫普京:俄罗斯的未来,答案在中国

苏联最后元帅的临终前劝诫普京:俄罗斯的未来,答案在中国

磊子讲史
2026-10-22 14:31:36
姆巴佩不当言论事件始末

姆巴佩不当言论事件始末

干货收并购
2026-10-27 12:21:16
车厢内人员被甩飞:西班牙列车相撞死亡人数升至50人

车厢内人员被甩飞:西班牙列车相撞死亡人数升至50人

快科技
2026-10-28 19:48:11
关键时刻,蓝营一人倒戈绿营,蒋万安没说“我是中国人”遭反噬?

关键时刻,蓝营一人倒戈绿营,蒋万安没说“我是中国人”遭反噬?

DS北风
2026-10-28 17:10:03
前曼城球星开炮:凯恩拿金球奖?他连德甲最佳都不是

前曼城球星开炮:凯恩拿金球奖?他连德甲最佳都不是

晚风知我意21
2026-10-29 04:03:20
一次交付23架运20B?德专家没想到,美媒:全球最强预警机已量产

一次交付23架运20B?德专家没想到,美媒:全球最强预警机已量产

影孖看世界
2026-10-27 23:30:08
内娱审美再下降,赵丽颖复出造型被群嘲,网友让她体面退休,太扎心

内娱审美再下降,赵丽颖复出造型被群嘲,网友让她体面退休,太扎心

蹲坑看世界
2026-10-26 12:33:13
2026-10-29 04:40:49
机器人前瞻
机器人前瞻
智东西AI媒体矩阵品牌。机器人前瞻,机器人产业新媒体,专注报道全球机器人创新。
1014文章数 20关注度
往期回顾 全部

科技要闻

宇树科技前三季净利暴增270%

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

iPhone Duo七年等来一场吐槽大会

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

教育
房产
艺术
本地
公开课

教育要闻

“看把你妈妈能耐的!”家长高姿态与老师交流,网友:家长把家校沟通变成个人秀,最尴尬的其实是孩子

房产要闻

重新定义城芯院墅生活!33席印德华府,看见湾区墅居的时代答案

艺术要闻

23张人性与爱的照片,第1张就让人破防了……

本地新闻

十月奔赴迪庆,解锁梅里日照金山

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版