网易首页 > 网易号 > 正文 申请入驻

Ego数据进入质量时代:创维XR用整机思维,重新定义具身数采

0
分享至

行业疯狂追逐Ego数据规模的背后,是海量素材中真正可用于模型训练的占比极低。当模组堆叠式硬件走到瓶颈,从VR/XR走来的创维XR,把一体机整机工程能力迁移到机器人数采赛道,试图解决高质量第一视角数据的底层痛点。

近段时间,具身智能行业里一个信号越来越明确:Ego第一视角数据,正在从“拼数量”转向“拼质量”。

一边是行业疯狂收购Ego数据、大规模招募采集团队,Dyna 2把人类操作真实数据推到百万小时量级,Generalist GEN 1依靠50万小时人类操作数据完成预训练,Ego4D、Ego Exo4D等数据集也成为机器人模型训练的重要养料。资本市场也快速跟进,多家数采创业公司接连拿到大额融资,大厂也抛出百万小时级别的数据采集目标。

但热闹之下藏着残酷现实:流通市面上的通用Ego素材,真正能投入模型训练的有效占比并不算高。数据质量由五大核心维度决定:时空同步精度、空间精度、模态完备性、场景自然度、工程链路完整性。而大量缺陷在素材录制完成的那一刻就已经注定。

大量视频素材无法直接使用,很多时候不是画质不够清晰,而是时空同步错位、位姿信息缺失、多模态不同步等硬件底层问题。这些问题理论上可通过离线SLAM优化、跨传感器时间戳重对齐及人工标注校验等后处理手段缓解,但往往需要投入数倍的GPU算力与标注人力,且面对动态遮挡、快速运动等复杂场景时,算法推算的位姿和时序仍会出现系统性偏差。行业共识是,质量管控必须前置至采集端:硬件层面的底层缺陷,后期修复成本是前端管控的8-10倍,甚至有近40%的问题,完全无法依靠后处理算法补救。

这也意味着,只负责“录视频”的头戴设备,已经满足不了具身智能规模化训练的诉求。采集硬件,必须从源头把好质量关。在此前FAIR plus机器人全产业链接会、2026 AGIC深圳国际通用人工智能产业博览会上,创维XR一口气展出E2/E6/E8三款Ego数采一体机,搭配腕部相机、灯环定位模组、全身动捕模块,一套完整的具身数据采集产品矩阵正式亮相。

很多人会疑惑:一家做VR/MR硬件的企业,为什么下场做机器人训练数据采集?

剥开产品外壳会发现,这并不是一次跨界跟风,而是XR空间感知技术的能力迁移。XR设备的核心命题,就是持续回答两个问题:设备在哪,看向哪里。低延迟6DoF位姿估计、多目视觉与IMU紧耦合、传感器标定、微秒级时间戳同步,是VR头显出厂就必备的基础能力。

放到Ego数采场景,需求本质高度同源:只不过XR是用这套能力驱动虚拟渲染;Ego采集,则是把人在真实空间中的视觉画面、运动轨迹完整记录下来,让每一帧图像都锚定统一的时空基准,产出可训练的空间数据。

01.

模组堆叠VS整机预算思维:数采设备的底层分水岭

目前市面上不少Ego采集设备,走的是模组加法逻辑:优先选好图像传感器,再外挂供电、存储、无线模块,各个部件独立工作,位姿留到采集结束后离线解算。

这种模式看上去上手快,却埋藏大量工程隐患。头戴数采设备是跟随人持续运动的整机,功耗、重量、散热、算力、续航全部是强约束条件。多路相机并发SLAM运算、无线回传、长时间佩戴,任何一个环节失衡,都会直接污染最终的数据质量。

创维Ego采用的是XR行业沉淀多年的整机预算思维:立项之初就把重量、功耗、算力、散热作为硬性约束,摄像头、IMU、处理器、存储、无线传输全部做一体化设计,整机自成闭环,不需要外接主机、不需要外部定位基站,戴上设备就可以出门采集。

产品矩阵也形成清晰梯度,覆盖科研、商业项目、高精度数据集制作不同层级的需求:



E2:轻量化入门机型,整机重量低于140g,搭载双路1080P RGB摄像头,目前已量产,面向高校科研、轻量化小规模数据验证;



E6:已经实现量产的主力商业机型,高通XR2 Gen1平台,4颗灰度全局快门相机+2颗RGB相机,视场角214°,整机370g。在头戴设备原子运动评测集测试中,纯旋转组(9条轨迹)位置平均误差1.3mm、角度平均误差2.44°,纯平移组(15条轨迹)位置平均误差1.5mm、角度平均误差1.16°,旋转平移耦合组(2条轨迹)位置平均误差2.3mm、角度平均误差0.97°;全部26条轨迹按轨迹长度加权,位置平均误差2.1mm、角度平均误差1.06°,全程无一发散,适配中大规模商业数采项目;



E8:高端旗舰机型,高通XR2Gen2平台,4灰度+4RGB+TOF深度传感器,支持9路画面同步采集,视场角拓宽至270°,整机重量控制在300g,服务高精度专业数据集生产。

值得注意的是,E6/E8采用灰度+RGB混合相机布局"并不是简单的成本取舍。灰度全局快门相机的优势在于抑制运动模糊,数据量仅为RGB的1/3,以更低算力完成SLAM特征定位;RGB相机负责输出高质量语义画面,还原物体材质、颜色、状态。

两类相机视场互相重叠,重叠区域的充足像素,为特征匹配、位姿解算提供稳定约束——仅仅堆砌摄像头数量,是复刻不出这套协同逻辑的。

入门款E2为双路RGB轻量方案,定位是低成本获取高质量语义画面,主要面向对空间轨迹精度要求相对宽松的科研验证场景;对需要机内SLAM直出轨迹的商业项目,建议选择E6及以上机型。

02.

机内SLAM直出:把空间计算做在采集端

普通摄像头只能输出视频流,但具身智能训练需要的,是视频+空间轨迹,每一帧画面都要绑定对应时刻设备的6DoF位姿。

大量模组方案只能做到“录制画面”,位姿需要拿到素材之后,依靠服务器做离线VIO解算。在无外部辅助约束的室内环境中,离线方案位置误差普遍落在5 20cm区间。当数据规模扩大到上万小时,离线运算会消耗巨额服务器算力,拉长项目周期,抬高整体成本。

创维Ego的核心差异点,就是机内SLAM直出空间轨迹。多目视觉与IMU在设备端完成融合解算,视觉画面、空间位姿同步输出,客户拿到数据就可以直接投入训练。设备多相机达到微秒级时间同步,IMU与图像帧时间差控制在1ms以内。









实验室评测可以看出这套方案的稳定性:评测集分为纯旋转(R)、纯平移(T)、旋转平移耦合(C)三大类场景,覆盖26条轨迹,没有出现一条轨迹发散。无论是简单原子运动,还是长距离复合耦合运动,位置、角度误差都维持在毫米、小角度级别。简单原子运动与长距离复合耦合运动的误差,都被压在同一数量级上。





当然,实验室是理想条件,真实世界会有光照变化、遮挡、快速动作等各类干扰,但机内紧耦合的硬件与算法架构,从源头减少后处理带来的精度损耗与成本开销。

03.

不止第一视角:补齐手部、全身动作的完整数据链条

只依靠头戴第一视角,只能记录“人看到了什么”。机器人要学会完成操作任务,还需要搞懂“手怎么动、身体如何协调”。如果缺失手部交互、肢体运动信息,模型只能学到表层画面,学不到真实世界的操作逻辑。

基于VR手柄inside out定位的技术积累,创维XR搭建了完整外设生态,把数据采集从头部视角延伸到手部乃至全身。

腕部相机整机100g,内置IMU与红外灯环,腕部相机和头戴ego无线时间同步精度可达到50微秒;头显的灰度相机识别腕部红外灯环,直接解算出手腕6DoF位姿,无需事后二次解算。



同时开放同步接口,灯环定位模组可以搭载在第三方夹爪、触觉手套之上,编码器、触觉传感器等外设都可以接入整套系统,统一时间基准,记录夹爪开合、接触力等关键信息。



把动捕模组绑在四肢,头戴Ego同步采集,就可以得到全身动作数据。这套方案不用搭建昂贵的光学动捕场地,降低对OptiTrack专业动捕系统的场地、部署成本依赖,让全身动作采集可以走进家庭、工厂等真实环境。



就拿“拿起水杯”这个简单动作举例:头显记录第一视角画面,SLAM轨迹还原身体移动,腕部相机捕捉手部抓取姿态,触觉外设记录接触力度。多模态信息对齐之后,才是一份完整可用来学习人类操作逻辑的数据。

一体机形态也解决了场景的桎梏。很多数采方案拖着主机、线缆,只能局限在实验室厂房。创维Ego整机一体化设计,采集人员佩戴设备,就可以走进家庭、办公室、工厂,捕捉真实环境里的自然行为:遮挡、复杂光照、操作失误、突发干扰,这些都是实验室仿真很难复刻的高价值训练素材。

04.

从样机到规模化交付:打通采集 传输 标注全链路

具身智能行业一个普遍痛点:样机演示效果亮眼,一旦要几十上百台设备批量落地,就会遇到量产、品控、数据管线的重重难题。

创维XR依托集团成熟制造供应链,拥有符合ISO/IEC17025标准的检测能力,覆盖EMC、可靠性、信号性能等硬件测试;IMU标定、相机标定、SLAM算法全栈自研,已经完成数采设备量产落地,品控体系可以支撑上百台级别设备批量交付部署。

硬件之外,整套软件链路也一并补齐。配套手机EgoVisionAPP,可以做设备绑定、实时画面预览、采集启停、时间同步校验;当采集设备扩展到几十、几百台时,数据如何从现场送到后续流程,会演变成实际工程问题。创维 Ego 配套手机 APP,采集完成后通过 WiFi 上传,工作流简化为:设备采集 → 手机连接 → WiFi 上传 → 后续处理。后台运营平台支持工单管理、设备远程监控、批量数据回传。

05.

结语与未来:

斯坦福大学HAI《AI Index Report 2026》报告指出:RLBench仿真基准下的机器人操作成功率已推高至89.4%;而在包含1000项日常家务、模拟真实家庭环境的BEHAVIOR-1K基准测试中,顶尖团队的完整任务成功率仅为12.4%。值得注意的是,这12.4%仍是在仿真环境中取得的成绩,一旦走进光照、遮挡、物体形变都不可控的真实物理世界,差距只会进一步放大。这道鸿沟,恰恰反衬出高质量真实交互数据的稀缺。

千万小时级别的数据缺口摆在行业面前,但一小时录制视频,不等于一小时高质量训练数据。未来Ego数采比拼的,是谁能用更低成本,稳定产出时空对齐、模态完整、贴近真实世界的训练素材。

XR厂商做Ego采集,本质是把空间感知、多传感器同步、整机工程的积累复用至新赛道。E2/E6/E8梯度化产品矩阵,搭配外设生态与软件平台,创维XR交出了自己的解法。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1979年对越反击战中,张东林叛变投靠越军后一度被奉为座上宾,这个可耻叛徒最终迎来了怎样的结局?

1979年对越反击战中,张东林叛变投靠越军后一度被奉为座上宾,这个可耻叛徒最终迎来了怎样的结局?

磊子讲史
2026-09-07 16:28:13
曹德旺当年反对女儿嫁给厦大高材生,理由只有一句:他太优秀了!14年后,这个女婿拿到的不是聘书,而是福耀的一份重任

曹德旺当年反对女儿嫁给厦大高材生,理由只有一句:他太优秀了!14年后,这个女婿拿到的不是聘书,而是福耀的一份重任

背包旅行
2026-09-03 15:48:21
北京市副市长、市公安局局长秦运彪任公安部党委委员、副部长

北京市副市长、市公安局局长秦运彪任公安部党委委员、副部长

澎湃新闻
2026-09-09 12:30:29
赴美定居梦碎!飞机上出手打人,一家三口刚落地就被遣返

赴美定居梦碎!飞机上出手打人,一家三口刚落地就被遣返

社会日日鲜
2026-09-08 13:17:44
3-0横扫晋级!国乒21岁1米83新星崛起:王楚钦林诗栋缺席他扛旗?

3-0横扫晋级!国乒21岁1米83新星崛起:王楚钦林诗栋缺席他扛旗?

李喜林篮球绝杀
2026-09-08 17:04:19
决裂41年后李政道公开表示:我和杨振宁分裂,是中华民族一大悲剧

决裂41年后李政道公开表示:我和杨振宁分裂,是中华民族一大悲剧

浩渺青史
2026-09-08 01:16:10
德比斯:我是唯一一个信任中国摩托的车手!张雪点名要我加入车队

德比斯:我是唯一一个信任中国摩托的车手!张雪点名要我加入车队

念洲
2026-09-09 11:41:01
公安部党委领导班子调整

公安部党委领导班子调整

上观新闻
2026-09-09 15:06:03
高考数学131分,西电开学考试只考了15分!网友惊呆了:这难度是在选高斯吗?

高考数学131分,西电开学考试只考了15分!网友惊呆了:这难度是在选高斯吗?

闪电新闻
2026-09-09 11:02:47
63-84!世界杯首支亚洲队出局 8强已定5席 中国女篮利好 保送晋级

63-84!世界杯首支亚洲队出局 8强已定5席 中国女篮利好 保送晋级

侃球熊弟
2026-09-09 01:31:26
特斯拉“0稀土”电机的突破不在于技术,而在于……

特斯拉“0稀土”电机的突破不在于技术,而在于……

观察者网
2026-09-09 08:07:05
女篮世界杯实力榜更新:中国队下降1名位居第7 法国超美国升至榜首

女篮世界杯实力榜更新:中国队下降1名位居第7 法国超美国升至榜首

罗说NBA
2026-09-08 19:43:23
国内将逐渐停止 “痔疮手术”?做完人就废了?医生讲出实情

国内将逐渐停止 “痔疮手术”?做完人就废了?医生讲出实情

健康科普365
2026-09-08 21:30:05
小米:电池发生自燃并报废会补偿一台新车

小米:电池发生自燃并报废会补偿一台新车

台州交通广播
2026-09-07 15:27:47
2‑1逆转斩获5连胜!美网女单四强敲定2席!恭喜大富,萨巴对手确定

2‑1逆转斩获5连胜!美网女单四强敲定2席!恭喜大富,萨巴对手确定

南鸢北筏x
2026-09-09 13:23:06
内部员工曝光:别买中国轮胎?

内部员工曝光:别买中国轮胎?

新浪财经
2026-09-07 20:58:55
云南昆明一沿街餐馆突发大火,多间铺面被殃及,当地消防:店主使用干粉灭火器时不慎将灶台上的油盆打翻,未造成人员伤亡

云南昆明一沿街餐馆突发大火,多间铺面被殃及,当地消防:店主使用干粉灭火器时不慎将灶台上的油盆打翻,未造成人员伤亡

扬子晚报
2026-09-09 07:35:42
将战中国女篮,波多黎各主帅:我问了AI,连它都不看好我们

将战中国女篮,波多黎各主帅:我问了AI,连它都不看好我们

懂球帝
2026-09-09 09:58:12
“豆包手机”将于9月16日上市,目前已开启预约,全系512GB起步,配备长鑫存储硬件

“豆包手机”将于9月16日上市,目前已开启预约,全系512GB起步,配备长鑫存储硬件

台州交通广播
2026-09-08 23:10:31
凌晨两点的足疗店有多乱?内行老板揭露真相:很多人稀里糊涂吃亏

凌晨两点的足疗店有多乱?内行老板揭露真相:很多人稀里糊涂吃亏

智慧生活笔记
2026-09-09 05:57:11
2026-09-09 16:23:00
机器人大讲堂 incentive-icons
机器人大讲堂
立德机器人平台,是一个集媒体品牌、智库咨询、投资孵化、引智招商为一体的机器人垂直领域服务平台
7053文章数 4602关注度
往期回顾 全部

科技要闻

AI重大突破!OpenAI称解开近百年数学难题

头条要闻

卡德罗夫:俄乌冲突爆发以来 车臣共和国派出超7.6万人

头条要闻

卡德罗夫:俄乌冲突爆发以来 车臣共和国派出超7.6万人

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭麒麟最便宜贵公子争议,本人未回应

财经要闻

8月CPI同比涨0.8% PPI环比由降转涨

汽车要闻

魏牌全新蓝山申报信息曝光 方盒子造型 5/6座可选

态度原创

家居
艺术
亲子
房产
旅游

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

17幅 当代俄罗斯画家 布鲁西洛夫风景油画

亲子要闻

带美国家人看四川非遗灯展,小三宝一路惊讶的不得了,属小艾莉最兴奋,期待明年能有点新花样

房产要闻

砸388亿+首个方案出炉!三亚,又一片区要起飞!

旅游要闻

龙华点燃深港夏日夜经济 夏日狂欢节解锁一站式游玩体验

无障碍浏览 进入关怀版