衡宇 发自 凹非寺
量子位 | 公众号 QbitAI
因为货架上的小尺寸挂钩被价格标签牌挡住了一部分,进便利店打工的机器人君第一次尝试挂货……扑了个空。
换作以往,这时候就必须由人工工程师出马,先排查问题,再调整程序、补充数据,让机器人重新练习一遍。
但机器人君有点不一样。它自己琢磨出了新办法。
它回看此前的执行记录,发现头部相机的视角分辨率不足,加上标签牌遮挡,很难看清小挂钩的位置。
于是,Agent调整了策略,让左手先靠近目标,用腕部相机补上一个近距离视角,确认位置后,再由右手完成挂货。
![]()
更值得一提的是,刚才机器人君不仅自己发现了问题所在、寻得了解法,还把这套有效经验默默积累了下来,以备不时之需。
这套让机器人在工作中发现问题、调整策略、积累经验的机制,背后是智元最新发布的具身Agent框架Genie Master。
这也是智元近期掀起的“AI WAVE”系列技术发布的第四弹——这一次,智元在业界把Physical RSI(具身递归自进化)搬进了真实便利店业务流。
在Genie Master的加持下,智元精灵G2机器人在真实便利店环境执行任务的过程中,已经可以不依赖人工示范与调试,自主分析失败原因、调整策略、沉淀经验,实现“无人在环”的持续自我改进。
这是行业首次跳出仿真环境与实验室设定(toy setting),在真实业务场景中跑通并验证了Physical RSI。
Genie Master这套自主进化的闭环到底是怎么玩起来的?它又能为机器人的批量上岗,带来哪些颠覆性的改变?
Genie Master是什么?
要搞清楚这台机器人为什么能“自己悟道”,首先得看看它背后的Genie Master到底是个啥。
简单来说,Genie Master是一套具身Agent框架,其核心任务是连接上层Agent的推理能力与底层机器人的动作执行能力。
它不仅让Agent能够顺畅地调用机器人的各项能力、理解真实的物理执行反馈,还能根据任务进展持续组织行动和针对性练习。
一旦机器人在实际工作中暴露出了能力短板,这个问题就会直接进入自主改进流程。
![]()
不难看出,Genie Master想要重点构建机器人部署之后的持续改进机制——这其中既涉及任务执行当下的判断与动态调整,也涵盖了事后的经验沉淀和底层动作策略更新。
智元之所以提出这个框架,是因为它看到了行业长期以来的落地痛点。
行内人都知道,机器人进入真实商业场景后,难免遇到训练阶段没有覆盖的长尾情况。
执行失败、动作不稳定,或者某项任务耗时过长,都可能需要工程师介入排查,再通过调整程序、补充示范数据或训练模型来改善表现。
场景越多,任务越复杂,研发和维护的工作量也会随之增加。
如果每一种新需求都等着人工从头排查和调试,迭代速度就会受限,更难以跨场景大规模铺开落地。
一言以蔽之,具身智能要想真正大规模用起来,就必须从依赖人工示范的“被动微调”,转向机器人自主发现问题、解决问题的“自进化模式”。
Genie Master希望将其中一部分工作交给Agent。
通过把问题诊断、组织练习和结果评估都交由Agent来操盘,Genie Master支持机器人自主习得新能力,从而大幅缩短从“客户提出一项新需求”到“机器人掌握这项新本领”之间的研发周期。
除了开头提到的挂钩补货,在真实便利店的实测中,搭载Genie Master的机器人还展现出了更多应对复杂局面的能力。
据智元介绍,Genie Master团队已将取货、补货、清洁、异常恢复和多机协作纳入统一工作流,探索机器人在真实业务中的持续改进闭环。
闲时自己“加练”,具身Agent框架打通大脑与小脑
让机器人在工作中自我进化,思路并不难。
但在此之前,为什么这件事只停留在实验室的讨论里,几乎没人真正在现实业务中做起来、做出来?
究其原因,无论是上层的经验沉淀,还是底层的策略内化,都必须建立在一个极其硬核的基础之上——
上层推理“大脑”的引导,必须能精准落实为动作;底层执行“小脑”的结果,也必须能实时反馈给大脑。
为了打通这条任督二脉,Genie Master拿出了它的关键设计之一:
具身执行协议EEP(Embodied Execution Protocol)。
![]()
EEP为Agent与物理世界建立了一套统一接口,主要涵盖了四类核心接口:
- 能力接口:让Agent清楚知道机器人当前有哪些能力可以调用;
- 引导接口:让Agent能够向底层动作执行端传递具体的空间提示、物体参考和细粒度语言要求;
- 反馈接口:让Agent实时了解机器人执行动作后的真实物理情况;
- 连续性接口:让系统能够持续追踪机器人集群的任务进度、分工依赖,支持动态调度以及中断后的任务接续。
通过EEP协议,并配合时序对齐(Temporal Alignment)等协同设计,上层Agent可以根据执行结果随时动态调整引导;而底层的基座动作策略(Action Policy)则能结合当前观测和Agent的要求去精准执行动作,并实时返回观测与子任务状态。
在具身智能系统中,只有把推理、执行和反馈真正拧成一股绳,自我进化才不是空中楼阁。
EEP承担的正是这条交互链路中的关键接口作用,为后续的经验积累和策略更新打下了地基。
地基打牢之后,机器人在部署态下的“自卷”日常就开始了。
在便利店的正常工作流中,当机器人发现某些任务反复失败、执行不稳或者耗时过长,也就是暴露出了“能力缺口”时,Agent并不会坐视不管。
它会主动利用便利店的空闲时间,组织机器人针对这些薄弱环节进行“自主加练”。
练什么、怎么练、练完之后结果合不合格、遇到异常怎么恢复并重试,全由Agent一手张罗。真实的部署环境,就这样源源不断地为机器人提供着“接下来该练什么、该改什么”的实战依据。
一条路线积累经验,一条路线更新动作策略
既然已经在真实场景里把“发现问题”和“自主加练”张罗起来了,那么机器人又是如何把练出来的成果,真正长成自己身上的本事呢?
在这里,Genie Master采取了“双管齐下”的策略。
一条路线叫Harness RSI,负责积累经验;另一条路线叫Policy RSI,负责更新动作策略。
先来看Harness RSI。
它的核心逻辑是在保持模型权重和已有工具接口不变的前提下,主要通过优化提示词(Prompt)、记忆(Memory)和执行规则来改善后续的任务表现。
在日常推理执行的过程中,机器人会把成功和失败的例子“随做随记”;随后再通过每日的异步反思与记忆整合,把这些执行记录转化为更有效的引导、完成判定、异常恢复和协作规则,像写“错题本”一样纳入长期记忆中,并在后续按任务和场景需要逐步加载。
![]()
回看文章开头那个“便利店挂货”的案例,其实就是Harness RSI在发力。
最开始,那个小挂钩任务的成功率很低。但Agent在回溯了失败记录后诊断出了病根,即“头部相机视角分辨率不足,加上标签牌遮挡,导致机器人无法准确识别小尺寸挂钩的位置”。
于是,Agent把“先用左手腕部相机凑近补视角、确认后再用右手挂货”的新解法写进了可执行的经验里,后续再遇到类似情况,就能直接调取经验、从容应对。
“错题本”外,为了满足真机部署对低延迟、高稳定性的严苛要求,有些能力必须变成机器人的“肌肉记忆”。
这就轮到Policy RSI登场了。
Policy RSI会将机器人在自主执行、人工接管示范以及异常恢复过程中产生的数据,统统收集整理起来,通过筛选、加权和目标重标等方式提高数据质量,再使用监督学习、模仿学习或强化学习去直接更新底层的动作策略模型(Action Policy),让改进真正保留在模型参数里。
假设机器人在店里做“外卖打包防缠绕”这一任务,处理提带缠绕、执行回撤和异常恢复时产生的数据,经过筛选和处理后,可以用于后续动作策略训练,帮助模型改善类似任务的执行表现。
![]()
通过Policy RSI,机器人得以从一次次真实的执行经历中吸收养分,获得更稳定的执行力与更准确的指令跟随能力。
需要说明的是,不是说从此完全不需要人工参与了,Policy RSI仍会使用人工接管示范等数据,动作策略的更新也需要经过数据处理和模型训练。
更妙的是,这两条路线并不是各自为战,而是相互咬合、形成了一个越转越快的飞轮——
Harness RSI负责积累和组织经验,帮助系统分析失败原因、选择练习方式,并改善后续执行;
Policy RSI则将经过处理的执行数据用于动作策略训练,让有效经验有机会沉淀为更稳定的动作能力。
两条路线相互促进,形成从真实业务执行、发现能力缺口、自主练习,到经验沉淀和策略更新的闭环。智元希望借此让每一轮积累的经验,都能帮助系统更有效地诊断问题、选择练习和利用数据。
让提升能力的能力也持续进化,在相同投入下获得更大的能力增量,这正是“递归自进化(RSI)”的真正威力所在。
从“出厂即定型”到“越干越能干”
跳出便利店,站在整个具身智能产业的视角来看,智元Genie Master所探索的方向,正在推开一扇新的大门。
首先,在研发效率上,它彻底打破了以往机器人能力“出厂即定型”的枷锁,将其转向了“部署中持续生长”的新范式。
当AI的新解法能够自己在现场长成机器人的新本领,从客户提出新需求到机器人掌握新技能的交付周期将被大幅压缩。
其次,在商业化落地上,这也算清楚了一笔经济账。
当机器人在真实作业中“越干越能干”,同一套能力便会在部署中不断增厚。
未来向更多门店、更多跨行业场景复制时,后续部署与研发的边际成本将持续下探。
而这条不断降低的成本曲线,正是具身智能走向大规模商业化落地的核心前提。
![]()
回看智元自10月22日起启动的“AI WAVE”系列发布,作为其中的第四项内容,Genie Master在智元全栈具身AI的整体布局中起着关键的承上启下作用——它将底层基座模型与全栈AI能力延伸并扎根到了真实的商业部署态中。
当然,技术架构讲得再精彩,最终还是要靠实战表现来说话。
俗话说得好,是骡子是马,拉出来遛遛。
11月2日,智元计划开启一场全网围观的“24小时便利店直播”。
届时,将有6台精灵G2机器人连续上岗,在没有剧本的真实便利店营业中,接受严苛的转正考核。
![]()
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.