网易首页 > 网易号 > 正文 申请入驻

一顿早餐,多重考验:极智嘉 Gravity 具身模型复杂长任务能力大揭秘

0
分享至

在具身智能领域,长任务从不是时长竞赛。

一条包含多个关联子任务的作业链,考验的是机器人对任务依赖、动作条件和环境变化的综合管理能力。因此,长程任务不应只是比拼时长的“耐力赛”。

效率同样重要。单步动作缓慢、步骤之间等待、子任务失败后反复重试、甚至整段重启,都可能让任务时间“变长”,却不增加有效产出。

极智嘉Gravity具身智能模型在此次早餐任务演示中,面对反复干扰仍能自主完成任务,展现出决策速度、动作精度、应变灵活度与纠错自主度四个维度上的综合能力,让长任务执行兼具泛化能力与作业效率

决策速度

MoT双脑架构与分层记忆

高效执行长任务,首先要求任务决策与连续动作有效衔接。

做早餐包含一系列关联子任务。Gravity需要持续判断当前步骤是否完成、下一步的执行条件是否满足,避免重复判断和无效切换。

在Gravity的MoT双脑架构中,AR Transformer负责理解指令和场景、解析任务目标,并完成子任务编排;Diffusion Transformer负责预测未来状态、评估子目标并生成连续动作。



Gravity 框架架构总览

Short-Long Term Sensor-Task Memory 则维持任务上下文:短时记忆追踪近期观测、动作轨迹和环境变化,长期记忆保存任务目标、执行阶段与关键事件。配合Stage/Progress状态输出,模型能够持续判断当前步骤的完成度与后续任务的执行条件,构成可感知、可校验、可动态调度的任务闭环

动作精度

精密操作与可供性推理

单步操作的准确性,是控制长任务返工成本的基础。

将面包片放入狭窄槽口前,Gravity先调整面包片与槽口的相对位姿,对准入口,再完成约束插入。这种局部调整有助于减少错位及重复尝试。效率不是省略必要动作,而是通过精准操作降低整个子任务的完成成本。



当两片面包间距不足、无法直接形成稳定夹取时,模型首先进行抓取可供性推理(Grasp Affordance Reasoning),判断当前条件是否满足;随后通过非抓取操作(Non-prehensile Manipulation)主动调整目标构型,为稳定抓取创造空间,避免在不可行状态下反复试抓。



Gravity的Robot Skill与专家先验机制,可进一步将定位、抓取、插装、倾倒等操作封装为可组合技能,并注入操作示范、工艺规范、完成标准和安全边界,在提高泛化能力的同时降低试错成本。

应变灵活度

4D WAM与在线重规划

真实作业环境持续变化,执行动作也必须随之更新。

面包架和面包机发生大幅移动后,Gravity重新定位源端与目标端,调整夹取和放置动作;餐盘移动后,亦能重新确定放置位置。模型依据当前环境状态更新执行目标,而非沿用失效的位置与轨迹。



Gravity 4D通过RGB、Pointmap和Scene Flow构成4D未来表征,联合建模视觉外观、空间结构与运动变化。WAM根据观测与任务上下文推演未来状态,逆动力学模型 IDM 据此生成动作chunk,为在线重规划提供技术支撑。

当目标位置发生变化时,系统需要以最新观测为条件重新生成动作。当杯子被遮挡时,模型进入安全等待状态。



当杯子被移走时,果断中止当前倾倒动作以避免倾洒。



未来状态推演与执行条件校验共同支撑行为调整,减少无效执行,兼顾作业效率与操作安全。

纠错自主度

对齐物理状态与任务状态

长任务真正困难的地方,在于某个动作没有达到预期结果后,机器人是否知道哪里出了问题。

当面包片未能正确插入时,系统需要根据完成条件判断当前步骤尚未结束,重新估计面包片与槽口的相对位置,执行局部重规划并再次尝试。这属于动作级的闭环纠错。



如果已经完成的任务状态被改变,例如面包片被重新取出,则系统需要将Stage回溯至对应步骤,再次执行夹取和插入。这属于任务级的异常恢复。



纠错的效率价值,在于仅修正受影响的步骤,避免局部异常触发全流程重启。

进一步地,Gravity通过Evaluation Model与强化学习建立“部署—反馈—评估—再训练”闭环。成功、失败和人工接管轨迹经过结构化评估后,可用于失败样本重加权和离线强化学习,让现场异常持续转化为模型能力。

泛化与效率同时成立

才是真干活

此次早餐Demo集中呈现了一组可迁移的生产能力:任务编排、精密插入、抓取可供性推理、动态目标重定位、安全状态管理和闭环异常恢复。

这些能力可以进一步迁移至仓储中的打包、搬运、复核和巡检等任务。进入真实现场后,这套能力与WMS、WES、RMS协同,并接受成功率、作业周期、异常接管率和持续运行时间的检验。

Gravity以“深认知、快行动”将泛化能力与执行效率纳入同一框架:面对变化能够重新判断,面对异常能够自主恢复,同时以精简推理链路守住生产节拍。

按预设坐标把动作串起来,运行再久也只是“长脚本”。

只有把感知、规划和多个动作持续串联起来,并在环境变化、操作受阻之后继续完成目标,机器人才能真正接手一段完整流程。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
《伟大的长征》别只埋怨博古和李德,真正要负责的人,始终不认错

《伟大的长征》别只埋怨博古和李德,真正要负责的人,始终不认错

天玑影视说
2026-10-21 11:18:14
风波持续升级,刘国梁万万没想到,折磨他的不是匿名举报信,而是冷冰冰的WTTC报告

风波持续升级,刘国梁万万没想到,折磨他的不是匿名举报信,而是冷冰冰的WTTC报告

锁上的光v
2026-10-23 00:54:18
闹大了!温州一小区爆发内部矛盾,业主紧急送医

闹大了!温州一小区爆发内部矛盾,业主紧急送医

温州巡捕房
2026-10-23 16:18:30
网传间谍深夜翻快递站的面单,企图盗取我国境内快递数据,境外势力太坏了!

网传间谍深夜翻快递站的面单,企图盗取我国境内快递数据,境外势力太坏了!

黯泉
2026-10-23 17:59:44
上海人喝酒的规矩太奇葩!不拼不劝不挑菜,最后一条全国罕见!

上海人喝酒的规矩太奇葩!不拼不劝不挑菜,最后一条全国罕见!

阿莱美食汇
2026-10-23 15:54:10
巴黎五金功臣淡出两年,安置迟迟未落地,背后原因出人意料!

巴黎五金功臣淡出两年,安置迟迟未落地,背后原因出人意料!

体育见习官
2026-10-23 07:20:29
奇瑞摩托真的来了!踏板和巡航齐上阵,另有混动引擎

奇瑞摩托真的来了!踏板和巡航齐上阵,另有混动引擎

骑士分享
2026-10-23 11:40:04
声明压不住大火:比声明更快的那团火,烧出了什么

声明压不住大火:比声明更快的那团火,烧出了什么

迷世书童
2026-10-22 22:11:22
预警来了!今年冬天或是60年少见反常冬,三大特点,大家提早防范

预警来了!今年冬天或是60年少见反常冬,三大特点,大家提早防范

温读史
2026-10-23 00:40:41
垃圾时间刷2分!NBA场均17+5后卫来CBA仅9分,巩晓彬:软的像根面条

垃圾时间刷2分!NBA场均17+5后卫来CBA仅9分,巩晓彬:软的像根面条

弄月公子
2026-10-23 23:23:14
不给钱就卖到园区会所?22岁哈尔滨女孩王然,这次怕是凶多吉少了

不给钱就卖到园区会所?22岁哈尔滨女孩王然,这次怕是凶多吉少了

皮蛋儿电影
2026-09-22 11:20:47
银川潮水退去,盘点宁夏跌得最惨10大楼盘,最高跌幅接近45%

银川潮水退去,盘点宁夏跌得最惨10大楼盘,最高跌幅接近45%

坠入二次元的海洋
2026-10-23 13:15:10
多名演员发文抵制,业内人士:很悲哀,收入猛降八成,几乎成“免费劳动力”

多名演员发文抵制,业内人士:很悲哀,收入猛降八成,几乎成“免费劳动力”

上海约饭局
2026-07-05 15:23:20
乒坛迎来重大洗牌!WTT新负责人正式上任,刘国梁回归再添悬念

乒坛迎来重大洗牌!WTT新负责人正式上任,刘国梁回归再添悬念

云上乌托邦
2026-10-23 20:15:04
东北追击战:白崇禧距全歼林彪只差一道命令,历史差点被改写!

东北追击战:白崇禧距全歼林彪只差一道命令,历史差点被改写!

心灵短笛
2026-04-13 17:43:28
为什么上海开始流行反向养老?什么是反向养老?原来是这么回事

为什么上海开始流行反向养老?什么是反向养老?原来是这么回事

笔墨V
2026-10-23 03:13:17
国乒又输日本,教练组责任重大!一人恐被弃,难怪马琳要退出

国乒又输日本,教练组责任重大!一人恐被弃,难怪马琳要退出

井普独白
2026-10-23 13:12:01
谁能想到!被西方围堵四年的俄罗斯,反倒打出了国运翻盘的新局?

谁能想到!被西方围堵四年的俄罗斯,反倒打出了国运翻盘的新局?

兵鉴史
2026-07-31 03:17:31
梁文锋雪中送炭曾毓群

梁文锋雪中送炭曾毓群

字母榜
2026-10-23 13:01:54
乌克兰人民苦战四年,泽连斯基给乌克兰人带来六个成果

乌克兰人民苦战四年,泽连斯基给乌克兰人带来六个成果

回京历史梦
2026-10-14 10:18:49
2026-10-24 05:15:00
星海情报局 incentive-icons
星海情报局
关注“中国制造”的星辰大海
1496文章数 2034关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

汽车要闻

设计换新/智舱升级 2027款博越限时价7.89万起

态度原创

家居
房产
手机
健康
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

百亩大盘又 +1!攒量超 200 万㎡!江东,要燃起来了!

手机要闻

iPhone Duo首碎:刚到手就摔了 换后盖1598元

痘痘能根治吗?皮肤科医生说实话

军事要闻

美国或于明年开始扩建格陵兰岛军事设施

无障碍浏览 进入关怀版