网易首页 > 网易号 > 正文 申请入驻

全球公开规模最大的高精度人体运动数据集,诺亦腾机器人造

0
分享至



如今,机器人本体日趋完备,模型能力愈发强大。但影响它们进入真实物理世界的,是能够被准确理解、有效学习、真实转化的数据。

8月19日,2026世界机器人大会(WRC 2026)在北京开幕。诺亦腾机器人在本次大会参展亮相,并正式发布 HiPHI 高精度人体运动与人—物交互数据集,该数据集即日起面向全球科研社区免费开放。

HiPHI 共包含617.5小时,约2.001亿帧的运动数据,是迄今规模最大的开源高精度人体运动数据集之一。它可用于人形机器人动作跟踪、模仿学习、动作生成,也能够为数字人和计算机图形学中的运动先验模型提供高质量数据基础。

该数据集现已在 Hugging Face 公开上线,是诺亦腾机器人基于 “World Compiler” 理念发布的首个公开数据集,旨在让真实物理世界成为人工智能系统可学习的对象。(huggingface.co/datasets/noitomrobotics/HiPHI)

目前该数据集根据ModalityNet 开放研究许可协议 (ModalityNet Open Research License)向非商业用途科研社区免费开放。如需商业授权,可通过 modalitynet.com 与诺亦腾机器人联系。

617.5小时数据

记录了什么?

此次发布的数据总时长达到 617.5小时,采集自132名动捕演员,采集频率为90 Hz,可达到亚毫米级光学动捕精度。在这些数据中,371.8小时为全身人体运动数据,覆盖行走、跑步、姿态转换、动态运动、平衡及全身协调等。而另外的245.7小时为人—物交互数据



与只记录人体动作的其他数据集不同,HiPHI 会将动捕演员的动作 BVH 数据、物体六自由度运动轨迹和物体三维网格体(3D Mesh)信息同步记录在同一坐标系中。在整个数据集中,共使用了40件重量、大小不等的真实物体,覆盖12个类别。

当一个人在“拉”“推”或“搬”某件物体时,数据不仅包含人的动作,还包含物体的位置、朝向、形状以及它与人体动作之间的对应关系。缺少物体信息以及接触状态的数据对于机器人的训练来说是不完整的。物体其本身就是物理交互的一部分。

从“动作清单”

走向“运动空间”

许多人体运动数据集以“动作清单”的方式组织:走路、跑步、跳跃、坐下、转身……动作种类与数据覆盖的广度似乎能够画上等号。但对于机器人学习而言,知道数据中“有哪些动作”还远远不够。

以“坐下”为例。不同的初始姿态、移动方向、动作速度、座椅高度和支撑方式,都会形成不同的运动轨迹;从站立到坐下也涉及重心变化、身体平衡以及多个关节之间的连续协调。如果只是为一段数据贴上“坐下”的标签,这些真正决定动作如何完成的信息就很难被充分表达。



因此,HiPHI 构建出了一个具有系统性和连续性的“运动空间”。诺亦腾机器人团队参考 FrameNet 对人类动作语义的组织框架,系统考虑动作之间的变化、组合与转换。以动作单元进行结构化整理。可以说,早在采集第一帧数据之前,团队就已经围绕人体行为的语义关系进行了覆盖度设计。



在这一框架下,移动、姿势转换、动态动作、平衡和全身协调是运动空间中相互连接的区域;这种组织方式让模型学习动作如何开始、如何变化、如何衔接,以及在不同条件下如何完成。对于模仿学习、动作生成和运动先验模型而言,这意味着数据能够提供更完整的变化范围和更清晰的物理约束。

数据中的动作

能否真正转化为机器人能力?

从动作数据到机器人自主能力,还需要经过从采集到仿真到真机部署的过程。诺亦腾机器人团队首先将HiPHI中的人体动作重定向到人形机器人,再通过物理仿真与强化学习,让机器人在满足关节限制、平衡和接触约束的情况下,学习如何复现相应动作。

在训练数据量相同的情况下,无论使用3小时还是20小时随机采样的验证子集,基于 HiPHI 训练的控制策略都能更快学会动作,并以更高的成功率完成运动跟踪。这说明 HiPHI 的优势不仅来自规模,也来自数据本身的质量与覆盖度。



当 HiPHI 的训练数据进一步从3小时增加到300小时时,控制策略在四个未参与训练的外部动作数据集上的关节跟踪误差持续下降。这表明,随着高质量数据规模扩大,机器人对陌生动作的学习和泛化能力仍在继续提升。

目前,基于HiPHI训练的控制策略已经成功部署在真实的宇树G1人形机器人上,实现跑步、坐下、爬行、搬运箱子和拖拉行李箱等动作。HiPHI完成了一次从“人类如何运动”到“机器人如何学习”的完整验证。



为具身智能行业提供一套

可信赖的公共数据基础数据

高质量人体运动数据长期稀缺,行业一直面临规模与精度难以兼得的问题:互联网视频体量庞大,却缺少机器人学习所需的精确物理状态和交互信息;实验室采集的数据精度更高,但受制于采集成本和生产效率,往往只能覆盖有限的行为类型。正因如此,同时具备大规模、高精度和丰富动作覆盖的数据集很少对外开放,由商业数据生产企业完整公开的案例更为罕见。

此次公开的617.5小时 HiPHI 数据,是诺亦腾机器人持续生产的高精度人体运动数据中的一个代表性样本。除开源部分外,诺亦腾机器人可提供的同类数据规模可达到本次开源数据的十倍以上,并根据具体应用场景,在动作范围、交互物体、机器人本体和交付格式等方面提供定制化的数据生产与商业授权服务。企业可以通过此次开源版本直接评估数据的覆盖度、精度和组织方式,并进一步通过 ModalityNet 获取更大规模、可用于商业开发的数据。

Noitom Robotics 创始人&CEO 戴若犁博士表示:

Physical AI 面临的真正瓶颈,不在于世界上存在多少数据,而在于其中究竟有多少能够真正被机器学习。HiPHI 是我们给出的第一个答案。这类高质量数据通常被企业视为核心资产,很少对外开放。我们选择公开 HiPHI,一方面是希望为具身智能行业提供一套可信赖的公共数据基础;另一方面,也源于我们对自身持续生产高质量数据能力的信心。”

诺亦腾机器人首席科学家韩磊博士表示:

动作覆盖度、逐帧数据质量和交互物体状态,直接决定了人形机器人能否真正从人类运动数据中学到能力。因此,从数据设计、生产评估到发布,我们始终围绕这三个重点展开。此次发布已经包含研究人员使用和评估数据所需的完整内容,包括标准化 BVH 文件、同步物体轨迹、语义化动作索引HiPHI 也是我们日常数据生产能力的真实体现:依托这套基础设施,我们每年可为合作伙伴生产超过10万小时的高质量数据。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
自导自演“打磨芯片”栽赃华为,被光速打脸后,那照妖镜照出了谁

自导自演“打磨芯片”栽赃华为,被光速打脸后,那照妖镜照出了谁

潋滟晴方DAY
2026-09-05 14:42:12
CCTV5直播,中国男篮VS哈萨克斯坦,赢球不难,郭士强做好三件事

CCTV5直播,中国男篮VS哈萨克斯坦,赢球不难,郭士强做好三件事

体坛小快灵
2026-09-10 10:17:47
1.17 亿血赚!切尔西新王封神一战!名宿彻底看傻眼

1.17 亿血赚!切尔西新王封神一战!名宿彻底看傻眼

澜归序
2026-09-10 09:41:16
股价暴跌95%、两位CEO下台,这家5000亿巨头在10年后“活过来”了

股价暴跌95%、两位CEO下台,这家5000亿巨头在10年后“活过来”了

钛媒体APP
2026-09-07 17:19:07
卫星图像显示,在美国战争威胁下,伊朗“镐山”核设施建设激增

卫星图像显示,在美国战争威胁下,伊朗“镐山”核设施建设激增

泪满过眼
2026-09-10 09:39:08
限时“秋凉”将到期,明起气温回升30℃以上区域增多

限时“秋凉”将到期,明起气温回升30℃以上区域增多

北青网-北京青年报
2026-09-10 09:29:07
iPhone Duo 大圆角设计真丑!黔驴技穷,苹果早就不行了

iPhone Duo 大圆角设计真丑!黔驴技穷,苹果早就不行了

喜爱的CAD
2026-09-10 10:42:16
台湾方面频繁针对爱奇艺、小红书、螺蛳粉、张雪机车及瑞幸咖啡等入台进行严格审查,国台办:是不得人心的政治操弄

台湾方面频繁针对爱奇艺、小红书、螺蛳粉、张雪机车及瑞幸咖啡等入台进行严格审查,国台办:是不得人心的政治操弄

政知新媒体
2026-09-09 14:04:45
欧冠上演英超西甲焦点大战:6.8亿豪门1-2被逆转 惨遭死敌5连斩

欧冠上演英超西甲焦点大战:6.8亿豪门1-2被逆转 惨遭死敌5连斩

狍子歪解体坛
2026-09-10 04:57:39
谢婷婷罕见发声,揭开前嫂子张柏芝真面目,与网络传言天差地别

谢婷婷罕见发声,揭开前嫂子张柏芝真面目,与网络传言天差地别

看尽落尘花q
2026-08-04 15:28:11
刘翔晒工资明细:退役11年合计98万元,月均7000元

刘翔晒工资明细:退役11年合计98万元,月均7000元

南方都市报
2026-09-10 14:03:20
房地产的中产阶级,正在消失

房地产的中产阶级,正在消失

地产大爆炸
2026-09-09 21:47:15
金砖峰会将开幕,普京已确定参会,印度放出风声,对中国有事相求

金砖峰会将开幕,普京已确定参会,印度放出风声,对中国有事相求

三石记
2026-09-09 13:29:36
拉夫罗夫向全球交底:中俄永不结盟,俄罗斯绝不当中国小跟班

拉夫罗夫向全球交底:中俄永不结盟,俄罗斯绝不当中国小跟班

精彩启程
2026-09-10 13:01:06
前苏联外交官回忆:1949年高岗访苏,曾建议斯大林将东北纳入苏联版图

前苏联外交官回忆:1949年高岗访苏,曾建议斯大林将东北纳入苏联版图

凉州辞
2026-09-10 06:00:03
东莞通报:高伟文严重违纪违法,被开除党籍和公职

东莞通报:高伟文严重违纪违法,被开除党籍和公职

南方都市报
2026-09-10 14:18:31
研究员评价麒麟9050 Pro:达到了一个制程落后,但性能领先的格局。不过逻辑折叠只是增效方案,我们需要突破先进制程

研究员评价麒麟9050 Pro:达到了一个制程落后,但性能领先的格局。不过逻辑折叠只是增效方案,我们需要突破先进制程

逍遥漠
2026-09-09 11:43:02
这是啥安排?女篮扛旗人2场不打,球迷:留在板凳做思想工作吗?

这是啥安排?女篮扛旗人2场不打,球迷:留在板凳做思想工作吗?

南海浪花
2026-09-10 07:24:32
甜美女神金晨:美若天仙,国色天香。沉鱼落雁,闭月羞花!

甜美女神金晨:美若天仙,国色天香。沉鱼落雁,闭月羞花!

十为先生
2026-09-10 14:26:53
我85岁才明白:永远不要在兄弟姐妹面前,随口说出5句话,切记

我85岁才明白:永远不要在兄弟姐妹面前,随口说出5句话,切记

黄家湖的忧伤
2025-07-04 17:25:58
2026-09-10 15:56:49
智能纪元AGI
智能纪元AGI
专注科技、科学、商业产业报道
2606文章数 10612关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

22岁女子与男友吵架后投江身亡:生前被迫写"卖身契"

头条要闻

22岁女子与男友吵架后投江身亡:生前被迫写"卖身契"

体育要闻

一年丢掉的积分排名,郑钦文用18天找回来

娱乐要闻

郭德纲被处罚2天,身边人传出好消息

财经要闻

重磅!金融强国建设“十五五”规划出台

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

房产
健康
艺术
教育
时尚

房产要闻

别不服!海南的亿万富豪,只有不到300个!

牙疼,也可能跟心梗有关?!

艺术要闻

中国打造蒙古首都新地标,能扛-30℃极寒气候!

教育要闻

刘鹓看望慰问一线教师

女人不管多大,都可以看看这些“条纹T恤”,非常减龄又简约

无障碍浏览 进入关怀版