网易首页 > 网易号 > 正文 申请入驻

当数采设备不再稀缺,具身数据下一步拼什么?

0
分享至


作者 | 姚戈

最近一年,具身智能行业里的数据采集设备明显多了起来。入局者众多,很容易让人产生一种印象,数采硬件已经没有多少技术含量,做出一套设备似乎并不难。

但过去一年,我们采访了不少具身智能数据公司。一个越来越明显的感受是,行业已经不太缺“快速、大量采数据”的方案,真正稀缺的是能够稳定进入模型训练,并最终带来模型能力提升的数据。

数采设备越来越多,并不意味着高质量的第一视角数据已经变得容易获得。事实上,我们听到过不少因为数据质量问题拖慢甚至影响模型训练的案例。

最近,开源数据集 Xperience-10M 背后的 Physical AI 数据基础设施公司 Ropedia,发布了新一代第一视角多模态采集设备 HOMIE Gen2。

在 HOMIE Gen2 发布之前,Ropedia 的上一代设备已经被用于生产 Xperience-10M。这套数据集开源后,又陆续进入 Qwen、Ai2 等团队的模型训练。

据 AI 前线了解,从第一台原型机到今天的 HOMIE Gen2,Ropedia 的采集设备在约十二个月里迭代了四代。2025 年 6 月,团队用 3D 打印结构件搭出第一台第一视角采集原型机“竹蜻蜓”;同年 10 月,第二代 R-Ego 改进了相机布局与头戴结构,并完成第一笔硬件销售;2026 年 1 月,HOMIE Gen1 走向产品化,支撑了 Xperience-10M 的生产;到了 HOMIE Gen2,团队开始进一步解决规模化部署的问题。

一家已经把数据送进模型训练的公司,会怎么重新设计一台数采设备?

这和 Ropedia 创始团队过去的经历有关。首席科学家刘子纬是南洋理工大学副教授,长期从事计算机视觉研究,研究方向从大规模视觉数据、长尾学习逐渐延伸到 3D 视觉和空间智能;CEO 陈昭熹和 CTO 洪方舟均为清华本科、南洋理工大学博士,之后进入 Meta,前者参与过光学动作捕捉数据体系建设,后者从事第一人称多模态智能研究。

这些经历让 Ropedia 很早就确定了一种思路:从模型训练需要什么数据,反过来决定设备应该采什么、采到什么精度,以及采集之后如何处理。设备能采多少数据只是其中一环,数据最终能不能被模型有效利用,同样会影响前端的硬件设计。


HOMIE Gen1 已经证明第一视角数据可以规模化采集,HOMIE Gen2 又往前走了一步。Ropedia 希望把真实世界中的人类活动更完整、更准确地记录下来,同时降低大规模生产这类数据的成本。

HOMIE Gen2,解决四个数采问题

采集视野扩大到 360° 空间

传统第一视角采集主要记录佩戴者前方发生的事情,但真实的物理任务并不只发生在正前方。人的侧面和背后,周围的物体和其他人,都可能影响一个动作的发生。

HOMIE Gen2 使用 4 目全景相机实现 360° 视野覆盖,同时加入 4 路空间音频。这样记录下来的信息可以覆盖佩戴者周围的环境,以及人与物体、环境之间的交互过程。

对于具身模型来说,这些上下文很重要。模型需要学习一个动作,也需要理解动作发生时周围有什么、人在和什么交互,以及环境随后发生了什么变化。扩大采集范围,本质上是在尽量减少真实世界信息在采集环节的损失。

对齐多种传感器

现在的数采设备普遍会使用多种传感器,真正困难的是让它们准确记录同一个物理时刻。

人在快速伸手、转头或者移动时,即便只有很小的时间偏差,也可能造成视觉画面和运动信息错位。单独看每一路数据可能都没有问题,组合起来却描述了几个不同时刻的状态。

HOMIE Gen2 将 4 路视频、4 声道空间音频和 200Hz 6DoF IMU 做了硬件级同步,多传感器之间的时间同步精度达到 50 微秒。

对模型训练来说,同步精度直接影响数据是否可靠。视觉、声音和运动信息只有在时间轴上准确对应,后续的空间理解和动作学习才有一致的数据基础。

开箱即用的 Xperience 数据

硬件完成采集之后,还有大量数据处理工作。

HOMIE Gen2 采集到的原始信号经过处理,会进一步形成结构化的Xperience 数据,包括校正后的双目视频、深度图、相机位姿、手部 21 关键点、全身 52 关键点,以及任务、子任务、当前动作三层文本标注。此外还可以输出 3D 高斯、场景网格、物体检测和 4D 物体跟踪等信息。


Ropedia 还公布了一组基于 HOMIE Gen2 金标准样本集的测试结果。空间定位平均绝对误差约为千分之二,深度范围误差低于 2.5%,手部 21 关键点动捕平均误差为 4.68 mm,动作语义标注准确率达到 96.0%。

这些能力最终指向一个很实际的问题。模型公司购买数据之后,如果还需要投入大量人力完成同步、校准、动作恢复和标注,采集环节节省下来的成本,很可能又会转移到数据处理环节。

Ropedia 因此希望把处理过程继续向前延伸,让客户拿到的数据能够更快进入模型训练。HOMIE 负责记录真实世界,后面的数据处理系统则负责把这些记录加工成模型能够使用的数据。

支撑真实场景规模化部署

高质量数据还要解决规模问题。

真实世界采集往往需要设备连续工作数小时,并进入家庭、工厂、商场等不同环境。设备重量、续航、存储和部署复杂度,最终都会影响数据生产的效率和成本。

HOMIE Gen2 整机约 380g,支持约 13 小时连续采集,无需提前在环境中布置外部设备;同时支持离线采集,本地 microSD 存储最高 2TB,并配有外接供电和数据接口。

据 Ropedia 介绍,HOMIE Gen2 从 CMOS、PCB 到结构件均为自研,目前具备约万台规模的产能。相比上一代方案,部署速度提升约 10 倍,采集成本降至约 1/12.5。多台设备也可以同时作业,让不同人员在同一环境中完成采集。

规模化还有另一层要求。设备数量增加之后,团队需要统一管理设备状态、采集任务和数据质量。HOMIE Gen2 因此加入了设备管理和数据采集系统,可以进行设备状态管理、远程升级和采集任务分发。

如果这些能力能够在实际交付中稳定兑现,HOMIE Gen2 就有机会把第一视角数据采集从少量设备完成的项目,变成可以批量部署的数据生产方式。

数据的竞争,正在换赛道

具身智能行业已经积累了越来越多数据,但模型真正缺的,仍然是来自真实世界、上下文完整、质量稳定,并且能够直接用于训练的人类经验数据。

这也让数据竞争的标准发生了变化。采集多少小时当然重要,但模型最终能不能用这些数据,正在成为更关键的指标。前面提到的多传感器同步、数据结构化和规模化部署,最终都要回到模型训练的效果上。

Ropedia 联合创始人兼首席科学家、南洋理工大学副教授刘子纬曾说:“如果经验是稀缺资源,那么就必须有人把它工业化。”

Ropedia 想做的,就是把人类经验变成一种可以持续生产的数据资源。

今年 3 月发布的 Xperience-10M 已经验证了这条路径。它包含约 1000 万个真实世界交互片段、1 万小时带音频的第一视角视频、28.8 亿个 RGB 帧和 5.76 亿个动作捕捉帧,总规模接近 1PB。此后,这套数据进入了 Ai2、Qwen 等团队的模型训练。

对一家数据公司来说,这可能比单纯的硬件参数更有说服力。数据采出来之后有没有人用,用完之后能不能帮助模型训练,最终决定了这些数据的价值。

目前,Ropedia 希望把这套数据生产能力继续用到机器人和 VLA 训练、世界模型、人机交互等方向,也可以针对具体的机器人任务进行定制化采集。HOMIE Gen2 则负责把这套能力进一步推向更多真实场景。

HOMIE Gen2 之后,Ropedia 想做什么?

Ropedia CEO 陈昭熹曾表示:“Ropedia 绝不只是一家数据采集公司,数据采集只是第一步。”

HOMIE Gen2 是这条路线的产品化入口。过去一年,Ropedia 已经通过 Xperience-10M 验证了从第一视角采集到模型训练的数据链路。现在,它希望通过 HOMIE Gen2 把这套能力进一步扩大,进入更多场景和更大规模的数据生产。

数采设备还会继续增加,硬件方案也可能越来越接近。但对数据的理解没有那么容易复制。

Ropedia 三位创始人过去的工作都长期与数据和模型打交道。刘子纬长期从事计算机视觉研究,从大规模视觉数据、长尾学习到 3D 视觉和空间智能,一直在研究数据与模型能力之间的关系;陈昭熹曾在 Meta 参与光学动作捕捉数据体系建设,洪方舟也曾在 Meta 从事第一人称多模态智能研究。

这些经历也影响了 Ropedia 做数采设备的思路。什么数据值得采,误差应该控制到什么程度,数据进入训练之后如何影响模型,再根据模型反馈调整下一轮数据生产,都需要对数据和模型有足够深入的理解。

按照 Ropedia 的规划,未来三到五年,公司希望进一步覆盖数据、硬件、基础设施与模型,成为一家机器人学习基础设施公司。这也对应着它对产品演进的三个阶段:

  • Gen 1,数据采集:多传感器、第一视角的原始数据采集;

  • Gen 2,经验采集:360° 完整上下文、硬件级同步、结构化 Xperience、可直接用于训练的数据;

  • 下一阶段,规模化智能:体验数据集、体验平台、体验基础设施。


这条路还很长。HOMIE Gen2 目前解决的,是其中最靠前、也很基础的一环:把真实世界里的人类活动,更准确、更完整地记录下来,再转化成模型能够使用的数据。

数采设备越来越多之后,真正拉开差距的,最终还是对智能的理解。

会议推荐

QCon 全球软件开发大会·2026(上海站)现已正式启动。本届大会聚焦 Harness AI 时代的工程实践,从「构建 AI」到「驾驭 AI」,围绕 AI Native 架构、Agent Runtime、AI Infra、Agent 安全与可观测、Loop Engineering、具身智能与世界模型等热门技术方向,邀请全球技术社区与产业一线实践者,共同分享 AI Native 时代最具价值的工程经验。

今日荐文


你也「在看」吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
楊茜堯羅子溢一對仔女顏值爆燈,網民封最美星二代:靚到似AI

楊茜堯羅子溢一對仔女顏值爆燈,網民封最美星二代:靚到似AI

粤睇先生
2026-09-11 23:44:17
希拉里·克林顿出来谈台湾问题了!9月10日,根据外媒报道,希拉里在接受采访时表示,我们必须审视我们潜在的危险,尤其是中国在想什么

希拉里·克林顿出来谈台湾问题了!9月10日,根据外媒报道,希拉里在接受采访时表示,我们必须审视我们潜在的危险,尤其是中国在想什么

扶苏聊历史
2026-09-12 16:16:15
美军已介入,陆战队抵近,美通知台当局准备,解放军军机进台海了

美军已介入,陆战队抵近,美通知台当局准备,解放军军机进台海了

麓谷隐士
2026-09-11 00:05:07
为什么总有人质疑王清珍们的英雄本色?

为什么总有人质疑王清珍们的英雄本色?

小眼睛小世界
2026-09-13 04:21:27
深夜,全线跳水!AI芯片,重大变数!后市怎么走?最新解读来了

深夜,全线跳水!AI芯片,重大变数!后市怎么走?最新解读来了

证券时报
2026-09-13 23:29:26
长沙男生4次考公失败后周游世界,花2.2万元去了6个国家17座城市,途中看到妈妈朋友圈心情五味杂陈,“老娘扛你看世界,你替老娘圆梦”

长沙男生4次考公失败后周游世界,花2.2万元去了6个国家17座城市,途中看到妈妈朋友圈心情五味杂陈,“老娘扛你看世界,你替老娘圆梦”

深圳晚报
2026-09-11 12:57:21
紧急提醒!交管12123已经大规模改版,没有更新的车主;小心踩这些大坑~

紧急提醒!交管12123已经大规模改版,没有更新的车主;小心踩这些大坑~

沙雕小琳琳
2026-09-13 17:57:54
童颜配巨乳!56cm蚂蚁腰158cm童颜配黄金沙漏,甜辣平衡的天花板

童颜配巨乳!56cm蚂蚁腰158cm童颜配黄金沙漏,甜辣平衡的天花板

生如稗草
2026-09-08 12:30:47
“摸臀” 女网红社死,安徽母校评论区被冲烂,留学梦可能有变数

“摸臀” 女网红社死,安徽母校评论区被冲烂,留学梦可能有变数

四斤
2026-09-09 15:22:29
法国《世界报》认为中国:这场伊朗战争,证明中国的战略十分正确

法国《世界报》认为中国:这场伊朗战争,证明中国的战略十分正确

麓谷隐士
2026-09-13 00:05:03
男性开始衰老,身体会发出6个信号,若没超过3个,说明还“硬朗”

男性开始衰老,身体会发出6个信号,若没超过3个,说明还“硬朗”

阿兵科普
2026-09-11 20:35:34
高市想不到,中方下手这么狠,日本签证费暴涨7倍,这叫以牙还牙

高市想不到,中方下手这么狠,日本签证费暴涨7倍,这叫以牙还牙

策前论
2026-09-13 14:06:51
拿9700万合同,原来还不是球队前二当家!骑士新赛季藏两个隐患

拿9700万合同,原来还不是球队前二当家!骑士新赛季藏两个隐患

老梁体育漫谈
2026-09-14 00:07:10
23分钟直红!福登倒地后双脚踹向B费,名宿吵翻了

23分钟直红!福登倒地后双脚踹向B费,名宿吵翻了

晚风知我意21
2026-09-14 00:54:40
女儿跟对象开玩笑,说父母是农民,没有退休金。男方愣了下:“你说的是真的吗?”女儿点头,男方脸色一沉:“那咱们不合适。”

女儿跟对象开玩笑,说父母是农民,没有退休金。男方愣了下:“你说的是真的吗?”女儿点头,男方脸色一沉:“那咱们不合适。”

背包旅行
2026-09-10 18:14:09
蔡琳否认因语言不通离婚,坦言长期争吵耗尽了能量,连生娃都是自己开车去医院

蔡琳否认因语言不通离婚,坦言长期争吵耗尽了能量,连生娃都是自己开车去医院

电影侦探社
2026-09-12 15:51:45
利曼前线:俄军第20集团军集体“渡河逃课”,拄拐冲锋遇上黄蜂无人机

利曼前线:俄军第20集团军集体“渡河逃课”,拄拐冲锋遇上黄蜂无人机

今观天下
2026-09-12 09:28:27
这还是出演《还珠格格》里的金锁吗,看脸已经完全认不出来了,变化太大了吧

这还是出演《还珠格格》里的金锁吗,看脸已经完全认不出来了,变化太大了吧

黎兜兜
2026-09-12 17:11:30
本以为“一梯一户”是完美住宅,没想到搬进去就后悔!太难受了

本以为“一梯一户”是完美住宅,没想到搬进去就后悔!太难受了

甜茶极简记
2026-09-12 12:52:22
谈判内幕曝光!公牛直接告诉库明加:不承诺首发,不保证上场时间

谈判内幕曝光!公牛直接告诉库明加:不承诺首发,不保证上场时间

夜白侃球
2026-09-13 11:02:30
2026-09-14 01:43:00
AI前线 incentive-icons
AI前线
面向AI爱好者、开发者和科学家,提供AI领域技术资讯。
1729文章数 171关注度
往期回顾 全部

科技要闻

三位AI大佬,罕见呼吁AI减速

头条要闻

烧烤店被检查15次致停业 12345:同一举报人投诉116次

头条要闻

烧烤店被检查15次致停业 12345:同一举报人投诉116次

体育要闻

魔术是今夏市场上最安静的球队

娱乐要闻

敬一丹留给世间最后的温柔

财经要闻

蔡昉:农民工落户可释放万亿消费潜力

汽车要闻

全新配色和新样式轮毂 乐道L80星光设计套装限时惊喜价10080元

态度原创

本地
手机
房产
数码
公开课

本地新闻

Onestage x 乐华娱乐暑期巡回选拔2026

手机要闻

iPhone17三巨头霸榜,2026 W36销量第四名,竟是这台“塑料机”?

房产要闻

别再等了!广州改善好房,正在进入“卖一套少一套”时代

数码要闻

ChromeOS旗舰笔记本GoogleBook 15曝光:搭载120Hz OLED屏幕 联想制造

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版