网易首页 > 网易号 > 正文 申请入驻

当数采设备不再稀缺,具身数据下一步拼什么?

0
分享至


作者 | 姚戈

最近一年,具身智能行业里的数据采集设备明显多了起来。入局者众多,很容易让人产生一种印象,数采硬件已经没有多少技术含量,做出一套设备似乎并不难。

但过去一年,我们采访了不少具身智能数据公司。一个越来越明显的感受是,行业已经不太缺“快速、大量采数据”的方案,真正稀缺的是能够稳定进入模型训练,并最终带来模型能力提升的数据。

数采设备越来越多,并不意味着高质量的第一视角数据已经变得容易获得。事实上,我们听到过不少因为数据质量问题拖慢甚至影响模型训练的案例。

最近,开源数据集 Xperience-10M 背后的 Physical AI 数据基础设施公司 Ropedia,发布了新一代第一视角多模态采集设备 HOMIE Gen2。

在 HOMIE Gen2 发布之前,Ropedia 的上一代设备已经被用于生产 Xperience-10M。这套数据集开源后,又陆续进入 Qwen、Ai2 等团队的模型训练。

据 AI 前线了解,从第一台原型机到今天的 HOMIE Gen2,Ropedia 的采集设备在约十二个月里迭代了四代。2025 年 6 月,团队用 3D 打印结构件搭出第一台第一视角采集原型机“竹蜻蜓”;同年 10 月,第二代 R-Ego 改进了相机布局与头戴结构,并完成第一笔硬件销售;2026 年 1 月,HOMIE Gen1 走向产品化,支撑了 Xperience-10M 的生产;到了 HOMIE Gen2,团队开始进一步解决规模化部署的问题。

一家已经把数据送进模型训练的公司,会怎么重新设计一台数采设备?

这和 Ropedia 创始团队过去的经历有关。首席科学家刘子纬是南洋理工大学副教授,长期从事计算机视觉研究,研究方向从大规模视觉数据、长尾学习逐渐延伸到 3D 视觉和空间智能;CEO 陈昭熹和 CTO 洪方舟均为清华本科、南洋理工大学博士,之后进入 Meta,前者参与过光学动作捕捉数据体系建设,后者从事第一人称多模态智能研究。

这些经历让 Ropedia 很早就确定了一种思路:从模型训练需要什么数据,反过来决定设备应该采什么、采到什么精度,以及采集之后如何处理。设备能采多少数据只是其中一环,数据最终能不能被模型有效利用,同样会影响前端的硬件设计。


HOMIE Gen1 已经证明第一视角数据可以规模化采集,HOMIE Gen2 又往前走了一步。Ropedia 希望把真实世界中的人类活动更完整、更准确地记录下来,同时降低大规模生产这类数据的成本。

HOMIE Gen2,解决四个数采问题

采集视野扩大到 360° 空间

传统第一视角采集主要记录佩戴者前方发生的事情,但真实的物理任务并不只发生在正前方。人的侧面和背后,周围的物体和其他人,都可能影响一个动作的发生。

HOMIE Gen2 使用 4 目全景相机实现 360° 视野覆盖,同时加入 4 路空间音频。这样记录下来的信息可以覆盖佩戴者周围的环境,以及人与物体、环境之间的交互过程。

对于具身模型来说,这些上下文很重要。模型需要学习一个动作,也需要理解动作发生时周围有什么、人在和什么交互,以及环境随后发生了什么变化。扩大采集范围,本质上是在尽量减少真实世界信息在采集环节的损失。

对齐多种传感器

现在的数采设备普遍会使用多种传感器,真正困难的是让它们准确记录同一个物理时刻。

人在快速伸手、转头或者移动时,即便只有很小的时间偏差,也可能造成视觉画面和运动信息错位。单独看每一路数据可能都没有问题,组合起来却描述了几个不同时刻的状态。

HOMIE Gen2 将 4 路视频、4 声道空间音频和 200Hz 6DoF IMU 做了硬件级同步,多传感器之间的时间同步精度达到 50 微秒。

对模型训练来说,同步精度直接影响数据是否可靠。视觉、声音和运动信息只有在时间轴上准确对应,后续的空间理解和动作学习才有一致的数据基础。

开箱即用的 Xperience 数据

硬件完成采集之后,还有大量数据处理工作。

HOMIE Gen2 采集到的原始信号经过处理,会进一步形成结构化的Xperience 数据,包括校正后的双目视频、深度图、相机位姿、手部 21 关键点、全身 52 关键点,以及任务、子任务、当前动作三层文本标注。此外还可以输出 3D 高斯、场景网格、物体检测和 4D 物体跟踪等信息。


Ropedia 还公布了一组基于 HOMIE Gen2 金标准样本集的测试结果。空间定位平均绝对误差约为千分之二,深度范围误差低于 2.5%,手部 21 关键点动捕平均误差为 4.68 mm,动作语义标注准确率达到 96.0%。

这些能力最终指向一个很实际的问题。模型公司购买数据之后,如果还需要投入大量人力完成同步、校准、动作恢复和标注,采集环节节省下来的成本,很可能又会转移到数据处理环节。

Ropedia 因此希望把处理过程继续向前延伸,让客户拿到的数据能够更快进入模型训练。HOMIE 负责记录真实世界,后面的数据处理系统则负责把这些记录加工成模型能够使用的数据。

支撑真实场景规模化部署

高质量数据还要解决规模问题。

真实世界采集往往需要设备连续工作数小时,并进入家庭、工厂、商场等不同环境。设备重量、续航、存储和部署复杂度,最终都会影响数据生产的效率和成本。

HOMIE Gen2 整机约 380g,支持约 13 小时连续采集,无需提前在环境中布置外部设备;同时支持离线采集,本地 microSD 存储最高 2TB,并配有外接供电和数据接口。

据 Ropedia 介绍,HOMIE Gen2 从 CMOS、PCB 到结构件均为自研,目前具备约万台规模的产能。相比上一代方案,部署速度提升约 10 倍,采集成本降至约 1/12.5。多台设备也可以同时作业,让不同人员在同一环境中完成采集。

规模化还有另一层要求。设备数量增加之后,团队需要统一管理设备状态、采集任务和数据质量。HOMIE Gen2 因此加入了设备管理和数据采集系统,可以进行设备状态管理、远程升级和采集任务分发。

如果这些能力能够在实际交付中稳定兑现,HOMIE Gen2 就有机会把第一视角数据采集从少量设备完成的项目,变成可以批量部署的数据生产方式。

数据的竞争,正在换赛道

具身智能行业已经积累了越来越多数据,但模型真正缺的,仍然是来自真实世界、上下文完整、质量稳定,并且能够直接用于训练的人类经验数据。

这也让数据竞争的标准发生了变化。采集多少小时当然重要,但模型最终能不能用这些数据,正在成为更关键的指标。前面提到的多传感器同步、数据结构化和规模化部署,最终都要回到模型训练的效果上。

Ropedia 联合创始人兼首席科学家、南洋理工大学副教授刘子纬曾说:“如果经验是稀缺资源,那么就必须有人把它工业化。”

Ropedia 想做的,就是把人类经验变成一种可以持续生产的数据资源。

今年 3 月发布的 Xperience-10M 已经验证了这条路径。它包含约 1000 万个真实世界交互片段、1 万小时带音频的第一视角视频、28.8 亿个 RGB 帧和 5.76 亿个动作捕捉帧,总规模接近 1PB。此后,这套数据进入了 Ai2、Qwen 等团队的模型训练。

对一家数据公司来说,这可能比单纯的硬件参数更有说服力。数据采出来之后有没有人用,用完之后能不能帮助模型训练,最终决定了这些数据的价值。

目前,Ropedia 希望把这套数据生产能力继续用到机器人和 VLA 训练、世界模型、人机交互等方向,也可以针对具体的机器人任务进行定制化采集。HOMIE Gen2 则负责把这套能力进一步推向更多真实场景。

HOMIE Gen2 之后,Ropedia 想做什么?

Ropedia CEO 陈昭熹曾表示:“Ropedia 绝不只是一家数据采集公司,数据采集只是第一步。”

HOMIE Gen2 是这条路线的产品化入口。过去一年,Ropedia 已经通过 Xperience-10M 验证了从第一视角采集到模型训练的数据链路。现在,它希望通过 HOMIE Gen2 把这套能力进一步扩大,进入更多场景和更大规模的数据生产。

数采设备还会继续增加,硬件方案也可能越来越接近。但对数据的理解没有那么容易复制。

Ropedia 三位创始人过去的工作都长期与数据和模型打交道。刘子纬长期从事计算机视觉研究,从大规模视觉数据、长尾学习到 3D 视觉和空间智能,一直在研究数据与模型能力之间的关系;陈昭熹曾在 Meta 参与光学动作捕捉数据体系建设,洪方舟也曾在 Meta 从事第一人称多模态智能研究。

这些经历也影响了 Ropedia 做数采设备的思路。什么数据值得采,误差应该控制到什么程度,数据进入训练之后如何影响模型,再根据模型反馈调整下一轮数据生产,都需要对数据和模型有足够深入的理解。

按照 Ropedia 的规划,未来三到五年,公司希望进一步覆盖数据、硬件、基础设施与模型,成为一家机器人学习基础设施公司。这也对应着它对产品演进的三个阶段:

  • Gen 1,数据采集:多传感器、第一视角的原始数据采集;

  • Gen 2,经验采集:360° 完整上下文、硬件级同步、结构化 Xperience、可直接用于训练的数据;

  • 下一阶段,规模化智能:体验数据集、体验平台、体验基础设施。


这条路还很长。HOMIE Gen2 目前解决的,是其中最靠前、也很基础的一环:把真实世界里的人类活动,更准确、更完整地记录下来,再转化成模型能够使用的数据。

数采设备越来越多之后,真正拉开差距的,最终还是对智能的理解。

会议推荐

QCon 全球软件开发大会·2026(上海站)现已正式启动。本届大会聚焦 Harness AI 时代的工程实践,从「构建 AI」到「驾驭 AI」,围绕 AI Native 架构、Agent Runtime、AI Infra、Agent 安全与可观测、Loop Engineering、具身智能与世界模型等热门技术方向,邀请全球技术社区与产业一线实践者,共同分享 AI Native 时代最具价值的工程经验。

今日荐文


你也「在看」吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
从辟谣到讣告:敬一丹这91天,教会我们别赌来日方长

从辟谣到讣告:敬一丹这91天,教会我们别赌来日方长

动物奇奇怪怪
2026-09-13 20:12:13
父亲有胃癌病史,55岁女子每年做胃镜,查出7mm早癌!医生发朋友圈感慨:上半年已发现超10例,任重道远……

父亲有胃癌病史,55岁女子每年做胃镜,查出7mm早癌!医生发朋友圈感慨:上半年已发现超10例,任重道远……

都市快报橙柿互动
2026-09-14 00:22:10
输了就是输了,没那么多借口可找!

输了就是输了,没那么多借口可找!

眼界纵横
2026-09-14 00:12:03
美媒关注郑钦文父母:父亲投入2000万!铁路售货员母亲辞职卖房

美媒关注郑钦文父母:父亲投入2000万!铁路售货员母亲辞职卖房

念洲
2026-09-10 09:34:18
有人统计过,县城体制内干部子女基本在机关事业、电力等国企工作

有人统计过,县城体制内干部子女基本在机关事业、电力等国企工作

观史搜寻着
2026-09-13 03:30:24
2026年,彻底告别机顶盒!90%家庭还在白白交冤枉钱?

2026年,彻底告别机顶盒!90%家庭还在白白交冤枉钱?

大稻网络科技
2026-09-03 10:12:23
他脱离革命六年,授衔时考虑到他资历太老,仍授予上将军衔

他脱离革命六年,授衔时考虑到他资历太老,仍授予上将军衔

浩渺青史
2026-09-13 10:34:38
70分钟10打11!14.3亿豪门1-0力擒同城死敌联赛全胜 神锋破门创纪录

70分钟10打11!14.3亿豪门1-0力擒同城死敌联赛全胜 神锋破门创纪录

狍子歪解体坛
2026-09-14 01:25:07
养老金差距持续拉大,如果长期不解决,真的会引发社会动荡吗?

养老金差距持续拉大,如果长期不解决,真的会引发社会动荡吗?

偷喝一口奶
2026-09-13 22:58:16
公社岁月:一九八一年后,公社里的大盖帽满天飞

公社岁月:一九八一年后,公社里的大盖帽满天飞

音乐时光的娱乐
2026-09-14 00:34:22
林晓强任漳州市政府党组成员、古雷开发区党工委书记

林晓强任漳州市政府党组成员、古雷开发区党工委书记

新浪财经
2026-09-13 14:42:39
“最后的男单大满贯得主”,播客主理人罗迪克的含金量还在上升

“最后的男单大满贯得主”,播客主理人罗迪克的含金量还在上升

有马体育
2026-09-13 18:28:53
樊振东入选亚运会海报!亚奥理事会的“亚洲体育群星宣传海报”没有王楚钦,国内宣传给了他名分

樊振东入选亚运会海报!亚奥理事会的“亚洲体育群星宣传海报”没有王楚钦,国内宣传给了他名分

开成运动会
2026-09-13 18:57:55
江苏中部六条过江通道为何迟迟未能落地引关注

江苏中部六条过江通道为何迟迟未能落地引关注

观察眼看世界
2026-09-13 20:03:21
听听恒大前员工心里话:真实的许家印,和你想的完全不一样

听听恒大前员工心里话:真实的许家印,和你想的完全不一样

花小猫的美食日常
2026-08-23 05:03:59
军事 | 美军想要动用核武器?

军事 | 美军想要动用核武器?

新民周刊
2026-08-10 09:09:12
用简单衣服塑出身形,自己看也亮堂

用简单衣服塑出身形,自己看也亮堂

分享情感的梅梅
2026-09-03 08:22:46
北京地铁既有线改造标准体系发布

北京地铁既有线改造标准体系发布

轨道世界
2026-09-13 23:59:48
金价又跌了!9月13日最新黄金每克报价速查,这个价你敢入手吗?

金价又跌了!9月13日最新黄金每克报价速查,这个价你敢入手吗?

坠入二次元的海洋
2026-09-13 18:09:37
中国“老板座驾”销量王:国产旗舰轿车夺冠,追上了德系超豪华车

中国“老板座驾”销量王:国产旗舰轿车夺冠,追上了德系超豪华车

柳先说
2026-09-11 12:22:18
2026-09-14 01:55:00
AI前线 incentive-icons
AI前线
面向AI爱好者、开发者和科学家,提供AI领域技术资讯。
1729文章数 171关注度
往期回顾 全部

科技要闻

三位AI大佬,罕见呼吁AI减速

头条要闻

烧烤店被检查15次致停业 12345:同一举报人投诉116次

头条要闻

烧烤店被检查15次致停业 12345:同一举报人投诉116次

体育要闻

魔术是今夏市场上最安静的球队

娱乐要闻

敬一丹留给世间最后的温柔

财经要闻

蔡昉:农民工落户可释放万亿消费潜力

汽车要闻

全新配色和新样式轮毂 乐道L80星光设计套装限时惊喜价10080元

态度原创

本地
时尚
房产
艺术
家居

本地新闻

Onestage x 乐华娱乐暑期巡回选拔2026

伊姐周六热推:电视剧《生逢其时》;综艺《大哥小助理》......

房产要闻

别再等了!广州改善好房,正在进入“卖一套少一套”时代

艺术要闻

画家查尔斯:把光画活,把色用绝,美得让人说不出话!

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版