网易首页 > 网易号 > 正文 申请入驻

具身仿真评测平台RoboColiseum发布,打造对齐真实世界的模型评测标尺

0
分享至

当前,具身智能正处于“模型爆发、标尺缺位”的阶段:模型究竟强在哪、短板又是什么?

日前,常态化具身智能仿真评测平台RoboColiseum正式发布上线。平台构建多维度的系统评测体系,以与真机表现高度一致的仿真评测,帮助开发者识别模型的能力优势与短板,持续迭代提升。平台面向全球高校、科研机构、模型企业与研究者开放,实时更新评测结果,致力于构建一套结果可信、过程可复现的具身模型评测标尺。

RoboColiseum自展开内测以来,已有海内外40多支队伍在平台开展模型训练与评测。



虚拟即现实,仿真评测对齐真实世界

模型在仿真环境中的优异表现,能否延续到真实物理世界?进入现实场景后,光照、材质、相机噪声、物体接触以及机器人初始位置和姿态的变化,都可能导致模型性能下降。因此,如何通过仿真评测准确衡量模型的真实能力,仍是一个关键难题。

RoboColiseum基于高保真仿真环境构建,在环境渲染和物理交互方面高度还原真实世界。经实测验证,仿真评测与实机部署的相关性达到89.5%,相同模型在仿真环境与真实世界中的评测差异小于10%。仿真评测由此可以作为真机表现的可靠参考,帮助开发者在进入成本更高、周期更长的真机测试前,快速完成模型筛选与问题定位。

这一验证链路也是双向的:使用真机数据训练的模型可以直接提交仿真评测,仿真数据训练的模型也能够通过真实机器人验证迁移效果。虚拟环境与真实世界由此实现双向打通,让开发者能够以更低成本获得高置信度结论,显著缩短“训练—评测—改进—部署”的迭代周期。



【仿真环境高度还原真实世界】





【Sim2Real实验对比】

打造维度最丰富的评测体系,四大维度精准归因能力短板

传统评测往往用一套综合成功率概括模型表现,RoboColiseum则围绕不同能力维度设置多个任务集,考察模型在各个维度中的表现。目前,平台已推出 4 类能力子榜、78个高保真仿真评测任务。未来还会结合产学研需求,持续更新任务和评测维度。



为了让失败原因可追溯,每项任务都会被进一步拆解为多个子步骤。评测平台不仅判断最终任务是否成功,也会记录模型完成了哪些步骤、在哪一步失败以及在不同场景中的泛化能力。

在评测设计上,RoboColiseum通过大规模、多样化样本降低单次测试的偶然性,并采用域随机化、训练集与测试集隔离、分布内与分布外测试等机制,减少模型依赖固定布局或数据规律“走捷径”的可能,提高评测结果的稳定性。



【四维评测体系】

AI agent一键提交,30分钟获得评测结果

对于开发者而言,高质量评测往往伴随着复杂的环境配置、资产适配和算力成本,搭建完整评测链路耗时耗力。

RoboColiseum将这些环节封装为一套自动化服务。开发者从注册到提交最快仅需5分钟,一键部署模型,最快30分钟即可完成仿真评测。平台将自动返回分项成绩、任务步骤结果及模型推演视频,直观呈现机器人在每个任务中的执行过程。

借助AI Agent,开发者还可通过自然语言对话完成数据下载、模型训练、本地验证和评测提交。模型代码和权重无需上传,只需在本地部署推理服务并接入标准接口,即可连接平台开展评测。



【5 分钟提交注册,30 分钟获得评测结果】

提供主流模型基线,开发者可自行复现

RoboColiseum已提供ACoT-VLA、π0、π0.5、GR00T等国际具身基座模型的基线成绩。开发者提交自己的模型后,即可在四个维度上与主流模型进行逐项比较,快速判断自身优势与不足。

同时,RoboColiseum提供各基线模型在平台任务上的训练代码及对应权重,开发者可自行复现训练与评测过程、核验基线成绩,并在统一条件下开展模型对比与后续研究。

打造公开、中立的“竞技场”和“训练场”

Coliseum原指古罗马圆形竞技场,一个公开、中立、谁都可以登台的竞技场。RoboColiseum,既是模型同场比较的“竞技场”,也是开发者反复测试、定位短板和持续迭代的“训练场”。

平台的长期目标,是将真实世界中的复杂任务转化为标准化、可复现、可持续更新的评测体系,让评测成为具身模型研发流程中的基础工具。

当模型能够在同一把尺子下比较和改进,具身智能的发展也将从精心挑选的成功演示,走向更加可靠、透明和可验证的真实进步。平台也期待更多开发者开放模型,共建具身智能生态。

RoboColiseum现已正式开放,欢迎全球开发者入场!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
火箭官方晒阿门和谢泼德增肌训练视频

火箭官方晒阿门和谢泼德增肌训练视频

赛场速报局
2026-09-13 08:03:25
曼联新左后卫首选已换人!英超铁闸强于霍尔,标价6000万性价比更高

曼联新左后卫首选已换人!英超铁闸强于霍尔,标价6000万性价比更高

罗米的曼联博客
2026-09-13 07:56:17
被骂到快倒闭的联想,凭什么一夜赚翻,成了AI时代的大赢家?

被骂到快倒闭的联想,凭什么一夜赚翻,成了AI时代的大赢家?

燕梳楼频道
2026-09-10 21:56:08
终于官宣!全红婵赴任全新岗位公开亮相,薪酬曝光,新造型惊艳

终于官宣!全红婵赴任全新岗位公开亮相,薪酬曝光,新造型惊艳

锅锅爱历史
2026-09-12 20:30:01
2-1击败萨巴伦卡!27岁美女首夺美网冠军:登顶世界第1 奖金3670万

2-1击败萨巴伦卡!27岁美女首夺美网冠军:登顶世界第1 奖金3670万

风过乡
2026-09-13 06:44:05
脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

火山詩话
2026-09-10 10:40:36
日本已婚男警偷吃23岁女下属!警局停车场频繁「人与人连接」,老婆翻手机后被曝光……

日本已婚男警偷吃23岁女下属!警局停车场频繁「人与人连接」,老婆翻手机后被曝光……

日本物语
2026-09-12 20:37:01
最新:乌克兰击中里海舰队的旗舰“鞑靼斯坦”号!

最新:乌克兰击中里海舰队的旗舰“鞑靼斯坦”号!

项鹏飞
2026-09-12 20:49:27
不到一年,被捧上神坛的“英雄”成了“人人喊打的过街老鼠”

不到一年,被捧上神坛的“英雄”成了“人人喊打的过街老鼠”

小马姨
2026-09-01 10:37:59
台湾退役中将帅化民表示,张学良被关一生不能算冤,因为西安事变那一夜,他差点让蒋介石从奉化带来的嫡系护卫全军覆没

台湾退役中将帅化民表示,张学良被关一生不能算冤,因为西安事变那一夜,他差点让蒋介石从奉化带来的嫡系护卫全军覆没

谈史论今1
2026-09-06 20:22:18
下周一A股又要承压了…

下周一A股又要承压了…

风风顺
2026-09-13 00:05:16
现实版修女与鱼??大叔深夜下水性侵锦鲤,被捕后直言:比其他鱼刺少...

现实版修女与鱼??大叔深夜下水性侵锦鲤,被捕后直言:比其他鱼刺少...

英国那些事儿
2026-09-12 00:48:17
王治郅全家福曝光,再婚生2娃,身家过亿,回归国家队,老婆很美

王治郅全家福曝光,再婚生2娃,身家过亿,回归国家队,老婆很美

大西体育
2026-09-12 16:20:44
轮椅推进场内!严子怡赛季五连冠后首败,伤病拖累天才恐影响亚运

轮椅推进场内!严子怡赛季五连冠后首败,伤病拖累天才恐影响亚运

杨华评论
2026-09-13 01:54:26
“小婉君”金铭45岁现状:个子太矮事业受挫,住北京豪宅不婚不育

“小婉君”金铭45岁现状:个子太矮事业受挫,住北京豪宅不婚不育

看尽落尘花q
2026-09-13 05:26:19
紧急提醒!高铁“三不带”统一执行,安检常被拦,别等误车才后悔

紧急提醒!高铁“三不带”统一执行,安检常被拦,别等误车才后悔

陈博世财经
2026-09-12 10:16:32
高铁女孩熟睡男生盯死手机不敢转头,两百万外网围观无声的人机对峙,藏着成年人不敢破冰的社交尴尬防线

高铁女孩熟睡男生盯死手机不敢转头,两百万外网围观无声的人机对峙,藏着成年人不敢破冰的社交尴尬防线

明话直说
2026-08-25 18:07:55
完全出乎意料!伊朗发射的导弹并未直接命中F-35战机,却精准击中了美军最核心的软肋:整场军事行动的战争成本已经彻底失控

完全出乎意料!伊朗发射的导弹并未直接命中F-35战机,却精准击中了美军最核心的软肋:整场军事行动的战争成本已经彻底失控

人生录
2026-09-12 00:05:19
你在哪一刻意识到了贫富差距?网友:家庭累死累活一年收入不如朋友银行的利息

你在哪一刻意识到了贫富差距?网友:家庭累死累活一年收入不如朋友银行的利息

解读热点事件
2026-09-12 00:09:04
复旦女硕士遭蜱虫叮咬重症,生活已不能自理。家属全网求助:没有特效药!

复旦女硕士遭蜱虫叮咬重症,生活已不能自理。家属全网求助:没有特效药!

听心堂
2026-09-11 07:34:55
2026-09-13 08:15:00
趣味科技 incentive-icons
趣味科技
十佳科技自媒体,冬奥会火炬手
6218文章数 6081关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

12345接线员:一开始挨骂睡不着 现在特希望有人骂我

头条要闻

12345接线员:一开始挨骂睡不着 现在特希望有人骂我

体育要闻

乔丹的得分统治力:如何违背篮球规律?

娱乐要闻

钟丽淇疑入ICU?聚会合照早露端倪

财经要闻

继房子茅台后 中产的第3个"神话"破灭了

汽车要闻

全新配色和新样式轮毂 乐道L80星光设计套装限时惊喜价10080元

态度原创

房产
艺术
本地
公开课
军事航空

房产要闻

别再等了!广州改善好房,正在进入“卖一套少一套”时代

艺术要闻

大唐名媛的游园图鉴:簪花、薄纱、遛鹤逗犬

本地新闻

Onestage x 乐华娱乐暑期巡回选拔2026

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

胡塞武装:9天攻占5400平方公里

无障碍浏览 进入关怀版