网易首页 > 网易号 > 正文 申请入驻

当数采设备不再稀缺,具身数据下一步拼什么?

0
分享至


作者 | 姚戈

最近一年,具身智能行业里的数据采集设备明显多了起来。入局者众多,很容易让人产生一种印象,数采硬件已经没有多少技术含量,做出一套设备似乎并不难。

但过去一年,我们采访了不少具身智能数据公司。一个越来越明显的感受是,行业已经不太缺“快速、大量采数据”的方案,真正稀缺的是能够稳定进入模型训练,并最终带来模型能力提升的数据。

数采设备越来越多,并不意味着高质量的第一视角数据已经变得容易获得。事实上,我们听到过不少因为数据质量问题拖慢甚至影响模型训练的案例。

最近,开源数据集 Xperience-10M 背后的 Physical AI 数据基础设施公司 Ropedia,发布了新一代第一视角多模态采集设备 HOMIE Gen2。

在 HOMIE Gen2 发布之前,Ropedia 的上一代设备已经被用于生产 Xperience-10M。这套数据集开源后,又陆续进入 Qwen、Ai2 等团队的模型训练。

据 AI 前线了解,从第一台原型机到今天的 HOMIE Gen2,Ropedia 的采集设备在约十二个月里迭代了四代。2025 年 6 月,团队用 3D 打印结构件搭出第一台第一视角采集原型机“竹蜻蜓”;同年 10 月,第二代 R-Ego 改进了相机布局与头戴结构,并完成第一笔硬件销售;2026 年 1 月,HOMIE Gen1 走向产品化,支撑了 Xperience-10M 的生产;到了 HOMIE Gen2,团队开始进一步解决规模化部署的问题。

一家已经把数据送进模型训练的公司,会怎么重新设计一台数采设备?

这和 Ropedia 创始团队过去的经历有关。首席科学家刘子纬是南洋理工大学副教授,长期从事计算机视觉研究,研究方向从大规模视觉数据、长尾学习逐渐延伸到 3D 视觉和空间智能;CEO 陈昭熹和 CTO 洪方舟均为清华本科、南洋理工大学博士,之后进入 Meta,前者参与过光学动作捕捉数据体系建设,后者从事第一人称多模态智能研究。

这些经历让 Ropedia 很早就确定了一种思路:从模型训练需要什么数据,反过来决定设备应该采什么、采到什么精度,以及采集之后如何处理。设备能采多少数据只是其中一环,数据最终能不能被模型有效利用,同样会影响前端的硬件设计。


HOMIE Gen1 已经证明第一视角数据可以规模化采集,HOMIE Gen2 又往前走了一步。Ropedia 希望把真实世界中的人类活动更完整、更准确地记录下来,同时降低大规模生产这类数据的成本。

HOMIE Gen2,解决四个数采问题

采集视野扩大到 360° 空间

传统第一视角采集主要记录佩戴者前方发生的事情,但真实的物理任务并不只发生在正前方。人的侧面和背后,周围的物体和其他人,都可能影响一个动作的发生。

HOMIE Gen2 使用 4 目全景相机实现 360° 视野覆盖,同时加入 4 路空间音频。这样记录下来的信息可以覆盖佩戴者周围的环境,以及人与物体、环境之间的交互过程。

对于具身模型来说,这些上下文很重要。模型需要学习一个动作,也需要理解动作发生时周围有什么、人在和什么交互,以及环境随后发生了什么变化。扩大采集范围,本质上是在尽量减少真实世界信息在采集环节的损失。

对齐多种传感器

现在的数采设备普遍会使用多种传感器,真正困难的是让它们准确记录同一个物理时刻。

人在快速伸手、转头或者移动时,即便只有很小的时间偏差,也可能造成视觉画面和运动信息错位。单独看每一路数据可能都没有问题,组合起来却描述了几个不同时刻的状态。

HOMIE Gen2 将 4 路视频、4 声道空间音频和 200Hz 6DoF IMU 做了硬件级同步,多传感器之间的时间同步精度达到 50 微秒。

对模型训练来说,同步精度直接影响数据是否可靠。视觉、声音和运动信息只有在时间轴上准确对应,后续的空间理解和动作学习才有一致的数据基础。

开箱即用的 Xperience 数据

硬件完成采集之后,还有大量数据处理工作。

HOMIE Gen2 采集到的原始信号经过处理,会进一步形成结构化的Xperience 数据,包括校正后的双目视频、深度图、相机位姿、手部 21 关键点、全身 52 关键点,以及任务、子任务、当前动作三层文本标注。此外还可以输出 3D 高斯、场景网格、物体检测和 4D 物体跟踪等信息。


Ropedia 还公布了一组基于 HOMIE Gen2 金标准样本集的测试结果。空间定位平均绝对误差约为千分之二,深度范围误差低于 2.5%,手部 21 关键点动捕平均误差为 4.68 mm,动作语义标注准确率达到 96.0%。

这些能力最终指向一个很实际的问题。模型公司购买数据之后,如果还需要投入大量人力完成同步、校准、动作恢复和标注,采集环节节省下来的成本,很可能又会转移到数据处理环节。

Ropedia 因此希望把处理过程继续向前延伸,让客户拿到的数据能够更快进入模型训练。HOMIE 负责记录真实世界,后面的数据处理系统则负责把这些记录加工成模型能够使用的数据。

支撑真实场景规模化部署

高质量数据还要解决规模问题。

真实世界采集往往需要设备连续工作数小时,并进入家庭、工厂、商场等不同环境。设备重量、续航、存储和部署复杂度,最终都会影响数据生产的效率和成本。

HOMIE Gen2 整机约 380g,支持约 13 小时连续采集,无需提前在环境中布置外部设备;同时支持离线采集,本地 microSD 存储最高 2TB,并配有外接供电和数据接口。

据 Ropedia 介绍,HOMIE Gen2 从 CMOS、PCB 到结构件均为自研,目前具备约万台规模的产能。相比上一代方案,部署速度提升约 10 倍,采集成本降至约 1/12.5。多台设备也可以同时作业,让不同人员在同一环境中完成采集。

规模化还有另一层要求。设备数量增加之后,团队需要统一管理设备状态、采集任务和数据质量。HOMIE Gen2 因此加入了设备管理和数据采集系统,可以进行设备状态管理、远程升级和采集任务分发。

如果这些能力能够在实际交付中稳定兑现,HOMIE Gen2 就有机会把第一视角数据采集从少量设备完成的项目,变成可以批量部署的数据生产方式。

数据的竞争,正在换赛道

具身智能行业已经积累了越来越多数据,但模型真正缺的,仍然是来自真实世界、上下文完整、质量稳定,并且能够直接用于训练的人类经验数据。

这也让数据竞争的标准发生了变化。采集多少小时当然重要,但模型最终能不能用这些数据,正在成为更关键的指标。前面提到的多传感器同步、数据结构化和规模化部署,最终都要回到模型训练的效果上。

Ropedia 联合创始人兼首席科学家、南洋理工大学副教授刘子纬曾说:“如果经验是稀缺资源,那么就必须有人把它工业化。”

Ropedia 想做的,就是把人类经验变成一种可以持续生产的数据资源。

今年 3 月发布的 Xperience-10M 已经验证了这条路径。它包含约 1000 万个真实世界交互片段、1 万小时带音频的第一视角视频、28.8 亿个 RGB 帧和 5.76 亿个动作捕捉帧,总规模接近 1PB。此后,这套数据进入了 Ai2、Qwen 等团队的模型训练。

对一家数据公司来说,这可能比单纯的硬件参数更有说服力。数据采出来之后有没有人用,用完之后能不能帮助模型训练,最终决定了这些数据的价值。

目前,Ropedia 希望把这套数据生产能力继续用到机器人和 VLA 训练、世界模型、人机交互等方向,也可以针对具体的机器人任务进行定制化采集。HOMIE Gen2 则负责把这套能力进一步推向更多真实场景。

HOMIE Gen2 之后,Ropedia 想做什么?

Ropedia CEO 陈昭熹曾表示:“Ropedia 绝不只是一家数据采集公司,数据采集只是第一步。”

HOMIE Gen2 是这条路线的产品化入口。过去一年,Ropedia 已经通过 Xperience-10M 验证了从第一视角采集到模型训练的数据链路。现在,它希望通过 HOMIE Gen2 把这套能力进一步扩大,进入更多场景和更大规模的数据生产。

数采设备还会继续增加,硬件方案也可能越来越接近。但对数据的理解没有那么容易复制。

Ropedia 三位创始人过去的工作都长期与数据和模型打交道。刘子纬长期从事计算机视觉研究,从大规模视觉数据、长尾学习到 3D 视觉和空间智能,一直在研究数据与模型能力之间的关系;陈昭熹曾在 Meta 参与光学动作捕捉数据体系建设,洪方舟也曾在 Meta 从事第一人称多模态智能研究。

这些经历也影响了 Ropedia 做数采设备的思路。什么数据值得采,误差应该控制到什么程度,数据进入训练之后如何影响模型,再根据模型反馈调整下一轮数据生产,都需要对数据和模型有足够深入的理解。

按照 Ropedia 的规划,未来三到五年,公司希望进一步覆盖数据、硬件、基础设施与模型,成为一家机器人学习基础设施公司。这也对应着它对产品演进的三个阶段:

  • Gen 1,数据采集:多传感器、第一视角的原始数据采集;

  • Gen 2,经验采集:360° 完整上下文、硬件级同步、结构化 Xperience、可直接用于训练的数据;

  • 下一阶段,规模化智能:体验数据集、体验平台、体验基础设施。


这条路还很长。HOMIE Gen2 目前解决的,是其中最靠前、也很基础的一环:把真实世界里的人类活动,更准确、更完整地记录下来,再转化成模型能够使用的数据。

数采设备越来越多之后,真正拉开差距的,最终还是对智能的理解。

会议推荐

QCon 全球软件开发大会·2026(上海站)现已正式启动。本届大会聚焦 Harness AI 时代的工程实践,从「构建 AI」到「驾驭 AI」,围绕 AI Native 架构、Agent Runtime、AI Infra、Agent 安全与可观测、Loop Engineering、具身智能与世界模型等热门技术方向,邀请全球技术社区与产业一线实践者,共同分享 AI Native 时代最具价值的工程经验。

今日荐文


你也「在看」吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
宁波市人民政府令!明年1月1日起施行

宁波市人民政府令!明年1月1日起施行

北仑发布
2026-10-28 21:38:47
相貌平平却挤走原配,未婚先孕嫁入亿万豪门,妹妹更是家喻户晓

相貌平平却挤走原配,未婚先孕嫁入亿万豪门,妹妹更是家喻户晓

猪小艳吖
2026-10-29 04:57:36
炸了!从17%跌到3%,沈伯洋台北选战热度崩盘,蓝营收网不装了?

炸了!从17%跌到3%,沈伯洋台北选战热度崩盘,蓝营收网不装了?

鹤羽说个事
2026-10-28 13:52:19
永州女局长周晓芬再发声:前夫手里的 “铁证”,突然经不起琢磨了

永州女局长周晓芬再发声:前夫手里的 “铁证”,突然经不起琢磨了

十为先生
2026-10-23 14:38:27
一场0-2,爆出大冷门,斯帕莱蒂不敢相信,6亿欧豪阵也没用

一场0-2,爆出大冷门,斯帕莱蒂不敢相信,6亿欧豪阵也没用

足球狗说
2026-10-29 05:44:14
反诈博主“微剑”家属再发声:被迫签署谅解书,彪形大汉上门施压

反诈博主“微剑”家属再发声:被迫签署谅解书,彪形大汉上门施压

天天热点见闻
2026-10-28 05:56:51
全网愤怒的“18岁成人礼被父亲骗”事件:你爱面子的模样,真丑陋

全网愤怒的“18岁成人礼被父亲骗”事件:你爱面子的模样,真丑陋

另子维爱读史
2026-10-28 21:21:44
蒙古国政府再次公开拒绝了中方提出的跨境铁路运力扩容方案

蒙古国政府再次公开拒绝了中方提出的跨境铁路运力扩容方案

果妈聊娱乐
2026-08-23 08:38:03
网约车追尾500多万元限量阿斯顿马丁 司机无奈:没商业险 只能分期慢慢赔

网约车追尾500多万元限量阿斯顿马丁 司机无奈:没商业险 只能分期慢慢赔

快科技
2026-10-27 16:00:32
真正的纯阳之物,隔天吃一次,脾胃好了,气血足了,浑身都有劲

真正的纯阳之物,隔天吃一次,脾胃好了,气血足了,浑身都有劲

刘哥谈体育
2026-10-24 16:32:50
在上海的社区食堂,老人十点来,白领十二点来,拼的是同一桌饭

在上海的社区食堂,老人十点来,白领十二点来,拼的是同一桌饭

趣味萌宠的日常
2026-10-29 01:55:37
哪个行业悄悄好起来了?就是硬捂着,不让别人知道的那种?

哪个行业悄悄好起来了?就是硬捂着,不让别人知道的那种?

夜深爱杂谈
2026-10-25 19:31:49
施晗进八强:佛系少女干了最不佛系的事!从无人在意到终被发现

施晗进八强:佛系少女干了最不佛系的事!从无人在意到终被发现

网球之家
2026-10-28 22:37:02
马拉松比赛的巨大变化!消失的体检报告

马拉松比赛的巨大变化!消失的体检报告

跑者排球视角
2026-10-28 22:56:03
英如镝终于坦白,巴图没参加爷爷葬礼是真的,他和父亲不联系巴图

英如镝终于坦白,巴图没参加爷爷葬礼是真的,他和父亲不联系巴图

小椰的奶奶
2026-10-29 03:44:49
河南省十四届人大常委会第二十七次会议任命名单

河南省十四届人大常委会第二十七次会议任命名单

大象新闻
2026-10-28 18:32:01
阴法唐中将带队入驻河北,省委书记程维高各种阻挠:我要去上诉

阴法唐中将带队入驻河北,省委书记程维高各种阻挠:我要去上诉

史海任我行
2025-08-31 16:07:04
点球制胜,曼城6-5淘汰英超第3,晋级英联杯八强

点球制胜,曼城6-5淘汰英超第3,晋级英联杯八强

侧身凌空斩
2026-10-29 05:35:58
刘嘉玲那时候一看就是大陆妹,和本地香港人还是有很大区别的

刘嘉玲那时候一看就是大陆妹,和本地香港人还是有很大区别的

西楼知趣杂谈
2026-10-21 11:32:28
世道变了,养老规则颠倒,江浙沪多地,已经掀起大范围反向养老

世道变了,养老规则颠倒,江浙沪多地,已经掀起大范围反向养老

童童聊娱乐啊
2026-10-18 15:27:25
2026-10-29 06:24:49
AI前线 incentive-icons
AI前线
面向AI爱好者、开发者和科学家,提供AI领域技术资讯。
1782文章数 175关注度
往期回顾 全部

科技要闻

宇树科技前三季净利暴增270%

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

头条要闻

仅退款后冰柜仍插着电在使用 买家回应

体育要闻

0胜4负与篮网国王一桌 热火字母哥赌错了?

娱乐要闻

巾帼不让须眉!章子怡拿下重磅荣誉

财经要闻

iPhone Duo七年等来一场吐槽大会

汽车要闻

首销期权益价23.98万起 2026款理想i6上市

态度原创

亲子
旅游
艺术
健康
军事航空

亲子要闻

13岁长到1米95,全网都在求食谱,我想劝大家先冷静

旅游要闻

忻州古城“古城焕新·产城共荣”入选2026中国旅游产业影响力案例

艺术要闻

23张人性与爱的照片,第1张就让人破防了……

查不出猝死风险?可能是项目没做对

军事要闻

伊朗最高领袖最新声明 提到了“结束战争”

无障碍浏览 进入关怀版