网易首页 > 网易号 > 正文 申请入驻

全球公开规模最大的高精度人体运动数据集,诺亦腾机器人造

0
分享至



如今,机器人本体日趋完备,模型能力愈发强大。但影响它们进入真实物理世界的,是能够被准确理解、有效学习、真实转化的数据。

8月19日,2026世界机器人大会(WRC 2026)在北京开幕。诺亦腾机器人在本次大会参展亮相,并正式发布 HiPHI 高精度人体运动与人—物交互数据集,该数据集即日起面向全球科研社区免费开放。

HiPHI 共包含617.5小时,约2.001亿帧的运动数据,是迄今规模最大的开源高精度人体运动数据集之一。它可用于人形机器人动作跟踪、模仿学习、动作生成,也能够为数字人和计算机图形学中的运动先验模型提供高质量数据基础。

该数据集现已在 Hugging Face 公开上线,是诺亦腾机器人基于 “World Compiler” 理念发布的首个公开数据集,旨在让真实物理世界成为人工智能系统可学习的对象。(huggingface.co/datasets/noitomrobotics/HiPHI)

目前该数据集根据ModalityNet 开放研究许可协议 (ModalityNet Open Research License)向非商业用途科研社区免费开放。如需商业授权,可通过 modalitynet.com 与诺亦腾机器人联系。

617.5小时数据

记录了什么?

此次发布的数据总时长达到 617.5小时,采集自132名动捕演员,采集频率为90 Hz,可达到亚毫米级光学动捕精度。在这些数据中,371.8小时为全身人体运动数据,覆盖行走、跑步、姿态转换、动态运动、平衡及全身协调等。而另外的245.7小时为人—物交互数据



与只记录人体动作的其他数据集不同,HiPHI 会将动捕演员的动作 BVH 数据、物体六自由度运动轨迹和物体三维网格体(3D Mesh)信息同步记录在同一坐标系中。在整个数据集中,共使用了40件重量、大小不等的真实物体,覆盖12个类别。

当一个人在“拉”“推”或“搬”某件物体时,数据不仅包含人的动作,还包含物体的位置、朝向、形状以及它与人体动作之间的对应关系。缺少物体信息以及接触状态的数据对于机器人的训练来说是不完整的。物体其本身就是物理交互的一部分。

从“动作清单”

走向“运动空间”

许多人体运动数据集以“动作清单”的方式组织:走路、跑步、跳跃、坐下、转身……动作种类与数据覆盖的广度似乎能够画上等号。但对于机器人学习而言,知道数据中“有哪些动作”还远远不够。

以“坐下”为例。不同的初始姿态、移动方向、动作速度、座椅高度和支撑方式,都会形成不同的运动轨迹;从站立到坐下也涉及重心变化、身体平衡以及多个关节之间的连续协调。如果只是为一段数据贴上“坐下”的标签,这些真正决定动作如何完成的信息就很难被充分表达。



因此,HiPHI 构建出了一个具有系统性和连续性的“运动空间”。诺亦腾机器人团队参考 FrameNet 对人类动作语义的组织框架,系统考虑动作之间的变化、组合与转换。以动作单元进行结构化整理。可以说,早在采集第一帧数据之前,团队就已经围绕人体行为的语义关系进行了覆盖度设计。



在这一框架下,移动、姿势转换、动态动作、平衡和全身协调是运动空间中相互连接的区域;这种组织方式让模型学习动作如何开始、如何变化、如何衔接,以及在不同条件下如何完成。对于模仿学习、动作生成和运动先验模型而言,这意味着数据能够提供更完整的变化范围和更清晰的物理约束。

数据中的动作

能否真正转化为机器人能力?

从动作数据到机器人自主能力,还需要经过从采集到仿真到真机部署的过程。诺亦腾机器人团队首先将HiPHI中的人体动作重定向到人形机器人,再通过物理仿真与强化学习,让机器人在满足关节限制、平衡和接触约束的情况下,学习如何复现相应动作。

在训练数据量相同的情况下,无论使用3小时还是20小时随机采样的验证子集,基于 HiPHI 训练的控制策略都能更快学会动作,并以更高的成功率完成运动跟踪。这说明 HiPHI 的优势不仅来自规模,也来自数据本身的质量与覆盖度。



当 HiPHI 的训练数据进一步从3小时增加到300小时时,控制策略在四个未参与训练的外部动作数据集上的关节跟踪误差持续下降。这表明,随着高质量数据规模扩大,机器人对陌生动作的学习和泛化能力仍在继续提升。

目前,基于HiPHI训练的控制策略已经成功部署在真实的宇树G1人形机器人上,实现跑步、坐下、爬行、搬运箱子和拖拉行李箱等动作。HiPHI完成了一次从“人类如何运动”到“机器人如何学习”的完整验证。



为具身智能行业提供一套

可信赖的公共数据基础数据

高质量人体运动数据长期稀缺,行业一直面临规模与精度难以兼得的问题:互联网视频体量庞大,却缺少机器人学习所需的精确物理状态和交互信息;实验室采集的数据精度更高,但受制于采集成本和生产效率,往往只能覆盖有限的行为类型。正因如此,同时具备大规模、高精度和丰富动作覆盖的数据集很少对外开放,由商业数据生产企业完整公开的案例更为罕见。

此次公开的617.5小时 HiPHI 数据,是诺亦腾机器人持续生产的高精度人体运动数据中的一个代表性样本。除开源部分外,诺亦腾机器人可提供的同类数据规模可达到本次开源数据的十倍以上,并根据具体应用场景,在动作范围、交互物体、机器人本体和交付格式等方面提供定制化的数据生产与商业授权服务。企业可以通过此次开源版本直接评估数据的覆盖度、精度和组织方式,并进一步通过 ModalityNet 获取更大规模、可用于商业开发的数据。

Noitom Robotics 创始人&CEO 戴若犁博士表示:

Physical AI 面临的真正瓶颈,不在于世界上存在多少数据,而在于其中究竟有多少能够真正被机器学习。HiPHI 是我们给出的第一个答案。这类高质量数据通常被企业视为核心资产,很少对外开放。我们选择公开 HiPHI,一方面是希望为具身智能行业提供一套可信赖的公共数据基础;另一方面,也源于我们对自身持续生产高质量数据能力的信心。”

诺亦腾机器人首席科学家韩磊博士表示:

动作覆盖度、逐帧数据质量和交互物体状态,直接决定了人形机器人能否真正从人类运动数据中学到能力。因此,从数据设计、生产评估到发布,我们始终围绕这三个重点展开。此次发布已经包含研究人员使用和评估数据所需的完整内容,包括标准化 BVH 文件、同步物体轨迹、语义化动作索引HiPHI 也是我们日常数据生产能力的真实体现:依托这套基础设施,我们每年可为合作伙伴生产超过10万小时的高质量数据。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
湖北小县城的工资已经开始崩塌

湖北小县城的工资已经开始崩塌

火锅局
2026-09-10 13:09:05
快讯!巴基斯坦可能要打大仗了!

快讯!巴基斯坦可能要打大仗了!

故事终将光明磊落
2026-09-10 10:55:49
中国女篮决战法国队,突收坏消息,应立即淘汰宫鲁鸣两大嫡系

中国女篮决战法国队,突收坏消息,应立即淘汰宫鲁鸣两大嫡系

宗介说体育
2026-09-10 10:50:18
尴尬名场面!赵一鸣官宣“称错赔十倍”没多久,门店称重翻车,17个小面包收65.98元,网友拿到335元赔付

尴尬名场面!赵一鸣官宣“称错赔十倍”没多久,门店称重翻车,17个小面包收65.98元,网友拿到335元赔付

火山詩话
2026-09-10 06:24:25
曝网红“深圳六哥”去世!年仅47岁,欠大几百万,张大炮还有30万

曝网红“深圳六哥”去世!年仅47岁,欠大几百万,张大炮还有30万

裕丰娱间说
2026-09-10 06:27:50
15999,苹果杀死比赛了

15999,苹果杀死比赛了

放毒
2026-09-10 07:10:45
脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

火山詩话
2026-09-10 10:40:36
15999元起!苹果折叠屏iPhone Duo仅支持eSIM 中国移动回应

15999元起!苹果折叠屏iPhone Duo仅支持eSIM 中国移动回应

快科技
2026-09-10 10:15:18
两地同日迎来新任代市长

两地同日迎来新任代市长

上观新闻
2026-09-10 14:18:25
大反转,上海体育局公开回应刘翔,双方疑似撕破脸,真该管管了

大反转,上海体育局公开回应刘翔,双方疑似撕破脸,真该管管了

宗介说体育
2026-09-10 15:40:43
太揪心了!离出口仅160米,2名工人被泥石流封在隧道9天,靠喝泥坑水活了下来

太揪心了!离出口仅160米,2名工人被泥石流封在隧道9天,靠喝泥坑水活了下来

可达鸭面面观
2026-09-10 11:44:35
张雪公开致歉:由于个人管理能力不足,修养不足,让大家失望了

张雪公开致歉:由于个人管理能力不足,修养不足,让大家失望了

毒sir财经
2026-09-09 18:32:42
陕西柞水一“猪坚强”被泥石流掩埋36天奇迹存活,主人:瘦了至少80斤,有条件会给它安享晚年,它吃泥土坚强活下来,对我们来说是个奇迹

陕西柞水一“猪坚强”被泥石流掩埋36天奇迹存活,主人:瘦了至少80斤,有条件会给它安享晚年,它吃泥土坚强活下来,对我们来说是个奇迹

极目新闻
2026-09-10 16:27:57
买断后刘翔把过去11年工资全捐了,年薪还不到9万

买断后刘翔把过去11年工资全捐了,年薪还不到9万

开箱见山
2026-09-10 11:02:04
人民日报发声!已经不是简单道歉的事,多名律师支持男童一方起诉

人民日报发声!已经不是简单道歉的事,多名律师支持男童一方起诉

放开他让wo来
2026-09-10 10:43:36
胖东来,一个开超市的跑去建楼,耗资65亿,把整个建筑行业的脸都打肿了:按时给钱、真材实料、给工人装空调!

胖东来,一个开超市的跑去建楼,耗资65亿,把整个建筑行业的脸都打肿了:按时给钱、真材实料、给工人装空调!

谭谈社会
2026-09-09 23:50:25
私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

乌克兰小静
2026-09-10 09:09:45
16+8轻断食,又跌落神坛!最新研究:进食≤8小时,全因死亡风险飙升34%;坚持6周,流失近50%肌肉,且无法改善心血管代谢

16+8轻断食,又跌落神坛!最新研究:进食≤8小时,全因死亡风险飙升34%;坚持6周,流失近50%肌肉,且无法改善心血管代谢

梅斯医学
2026-09-10 07:55:06
扎哈罗娃反问日本:当年屠杀中国、苏联平民时,戴的不正是菊花纹章吗?此前高市早苗要求俄拆除战胜军国主义日本的纪念碑

扎哈罗娃反问日本:当年屠杀中国、苏联平民时,戴的不正是菊花纹章吗?此前高市早苗要求俄拆除战胜军国主义日本的纪念碑

鲁中晨报
2026-09-10 13:43:05
罗永浩狂喷苹果首款折叠屏iPhone Duo:全是抄的

罗永浩狂喷苹果首款折叠屏iPhone Duo:全是抄的

IT之家
2026-09-10 15:54:12
2026-09-10 17:47:00
智能纪元AGI
智能纪元AGI
专注科技、科学、商业产业报道
2606文章数 10612关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

男子称停止资助后遭受助学生质问催捐 官方回应

头条要闻

男子称停止资助后遭受助学生质问催捐 官方回应

体育要闻

一年丢掉的积分排名,郑钦文用18天找回来

娱乐要闻

参加晚宴,刘亦菲因合照深陷争议

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

大六座+千匹马力+71度大电池 阿维塔T09曝光/年内上市

态度原创

家居
游戏
教育
亲子
公开课

家居要闻

2026建博会(广州) 公装联探展交流活动

老任直面会被"清算":2款新作|20个付费dlc|30个重制

教育要闻

教师节最重要的一课,是学会自我教育

亲子要闻

全球首例!不用开刀,他们用一根针解决胎儿肺部肿瘤

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版