网易首页 > 网易号 > 正文 申请入驻

Ego数据进入质量时代:创维XR用整机思维,重新定义具身数采

0
分享至

行业疯狂追逐Ego数据规模的背后,是海量素材中真正可用于模型训练的占比极低。当模组堆叠式硬件走到瓶颈,从VR/XR走来的创维XR,把一体机整机工程能力迁移到机器人数采赛道,试图解决高质量第一视角数据的底层痛点。

近段时间,具身智能行业里一个信号越来越明确:Ego第一视角数据,正在从“拼数量”转向“拼质量”。

一边是行业疯狂收购Ego数据、大规模招募采集团队,Dyna 2把人类操作真实数据推到百万小时量级,Generalist GEN 1依靠50万小时人类操作数据完成预训练,Ego4D、Ego Exo4D等数据集也成为机器人模型训练的重要养料。资本市场也快速跟进,多家数采创业公司接连拿到大额融资,大厂也抛出百万小时级别的数据采集目标。

但热闹之下藏着残酷现实:流通市面上的通用Ego素材,真正能投入模型训练的有效占比并不算高。数据质量由五大核心维度决定:时空同步精度、空间精度、模态完备性、场景自然度、工程链路完整性。而大量缺陷在素材录制完成的那一刻就已经注定。

大量视频素材无法直接使用,很多时候不是画质不够清晰,而是时空同步错位、位姿信息缺失、多模态不同步等硬件底层问题。这些问题理论上可通过离线SLAM优化、跨传感器时间戳重对齐及人工标注校验等后处理手段缓解,但往往需要投入数倍的GPU算力与标注人力,且面对动态遮挡、快速运动等复杂场景时,算法推算的位姿和时序仍会出现系统性偏差。行业共识是,质量管控必须前置至采集端:硬件层面的底层缺陷,后期修复成本是前端管控的8-10倍,甚至有近40%的问题,完全无法依靠后处理算法补救。

这也意味着,只负责“录视频”的头戴设备,已经满足不了具身智能规模化训练的诉求。采集硬件,必须从源头把好质量关。在此前FAIR plus机器人全产业链接会、2026 AGIC深圳国际通用人工智能产业博览会上,创维XR一口气展出E2/E6/E8三款Ego数采一体机,搭配腕部相机、灯环定位模组、全身动捕模块,一套完整的具身数据采集产品矩阵正式亮相。

很多人会疑惑:一家做VR/MR硬件的企业,为什么下场做机器人训练数据采集?

剥开产品外壳会发现,这并不是一次跨界跟风,而是XR空间感知技术的能力迁移。XR设备的核心命题,就是持续回答两个问题:设备在哪,看向哪里。低延迟6DoF位姿估计、多目视觉与IMU紧耦合、传感器标定、微秒级时间戳同步,是VR头显出厂就必备的基础能力。

放到Ego数采场景,需求本质高度同源:只不过XR是用这套能力驱动虚拟渲染;Ego采集,则是把人在真实空间中的视觉画面、运动轨迹完整记录下来,让每一帧图像都锚定统一的时空基准,产出可训练的空间数据。

01.

模组堆叠VS整机预算思维:数采设备的底层分水岭

目前市面上不少Ego采集设备,走的是模组加法逻辑:优先选好图像传感器,再外挂供电、存储、无线模块,各个部件独立工作,位姿留到采集结束后离线解算。

这种模式看上去上手快,却埋藏大量工程隐患。头戴数采设备是跟随人持续运动的整机,功耗、重量、散热、算力、续航全部是强约束条件。多路相机并发SLAM运算、无线回传、长时间佩戴,任何一个环节失衡,都会直接污染最终的数据质量。

创维Ego采用的是XR行业沉淀多年的整机预算思维:立项之初就把重量、功耗、算力、散热作为硬性约束,摄像头、IMU、处理器、存储、无线传输全部做一体化设计,整机自成闭环,不需要外接主机、不需要外部定位基站,戴上设备就可以出门采集。

产品矩阵也形成清晰梯度,覆盖科研、商业项目、高精度数据集制作不同层级的需求:



E2:轻量化入门机型,整机重量低于140g,搭载双路1080P RGB摄像头,目前已量产,面向高校科研、轻量化小规模数据验证;



E6:已经实现量产的主力商业机型,高通XR2 Gen1平台,4颗灰度全局快门相机+2颗RGB相机,视场角214°,整机370g。在头戴设备原子运动评测集测试中,纯旋转组(9条轨迹)位置平均误差1.3mm、角度平均误差2.44°,纯平移组(15条轨迹)位置平均误差1.5mm、角度平均误差1.16°,旋转平移耦合组(2条轨迹)位置平均误差2.3mm、角度平均误差0.97°;全部26条轨迹按轨迹长度加权,位置平均误差2.1mm、角度平均误差1.06°,全程无一发散,适配中大规模商业数采项目;



E8:高端旗舰机型,高通XR2Gen2平台,4灰度+4RGB+TOF深度传感器,支持9路画面同步采集,视场角拓宽至270°,整机重量控制在300g,服务高精度专业数据集生产。

值得注意的是,E6/E8采用灰度+RGB混合相机布局"并不是简单的成本取舍。灰度全局快门相机的优势在于抑制运动模糊,数据量仅为RGB的1/3,以更低算力完成SLAM特征定位;RGB相机负责输出高质量语义画面,还原物体材质、颜色、状态。

两类相机视场互相重叠,重叠区域的充足像素,为特征匹配、位姿解算提供稳定约束——仅仅堆砌摄像头数量,是复刻不出这套协同逻辑的。

入门款E2为双路RGB轻量方案,定位是低成本获取高质量语义画面,主要面向对空间轨迹精度要求相对宽松的科研验证场景;对需要机内SLAM直出轨迹的商业项目,建议选择E6及以上机型。

02.

机内SLAM直出:把空间计算做在采集端

普通摄像头只能输出视频流,但具身智能训练需要的,是视频+空间轨迹,每一帧画面都要绑定对应时刻设备的6DoF位姿。

大量模组方案只能做到“录制画面”,位姿需要拿到素材之后,依靠服务器做离线VIO解算。在无外部辅助约束的室内环境中,离线方案位置误差普遍落在5 20cm区间。当数据规模扩大到上万小时,离线运算会消耗巨额服务器算力,拉长项目周期,抬高整体成本。

创维Ego的核心差异点,就是机内SLAM直出空间轨迹。多目视觉与IMU在设备端完成融合解算,视觉画面、空间位姿同步输出,客户拿到数据就可以直接投入训练。设备多相机达到微秒级时间同步,IMU与图像帧时间差控制在1ms以内。









实验室评测可以看出这套方案的稳定性:评测集分为纯旋转(R)、纯平移(T)、旋转平移耦合(C)三大类场景,覆盖26条轨迹,没有出现一条轨迹发散。无论是简单原子运动,还是长距离复合耦合运动,位置、角度误差都维持在毫米、小角度级别。简单原子运动与长距离复合耦合运动的误差,都被压在同一数量级上。





当然,实验室是理想条件,真实世界会有光照变化、遮挡、快速动作等各类干扰,但机内紧耦合的硬件与算法架构,从源头减少后处理带来的精度损耗与成本开销。

03.

不止第一视角:补齐手部、全身动作的完整数据链条

只依靠头戴第一视角,只能记录“人看到了什么”。机器人要学会完成操作任务,还需要搞懂“手怎么动、身体如何协调”。如果缺失手部交互、肢体运动信息,模型只能学到表层画面,学不到真实世界的操作逻辑。

基于VR手柄inside out定位的技术积累,创维XR搭建了完整外设生态,把数据采集从头部视角延伸到手部乃至全身。

腕部相机整机100g,内置IMU与红外灯环,腕部相机和头戴ego无线时间同步精度可达到50微秒;头显的灰度相机识别腕部红外灯环,直接解算出手腕6DoF位姿,无需事后二次解算。



同时开放同步接口,灯环定位模组可以搭载在第三方夹爪、触觉手套之上,编码器、触觉传感器等外设都可以接入整套系统,统一时间基准,记录夹爪开合、接触力等关键信息。



把动捕模组绑在四肢,头戴Ego同步采集,就可以得到全身动作数据。这套方案不用搭建昂贵的光学动捕场地,降低对OptiTrack专业动捕系统的场地、部署成本依赖,让全身动作采集可以走进家庭、工厂等真实环境。



就拿“拿起水杯”这个简单动作举例:头显记录第一视角画面,SLAM轨迹还原身体移动,腕部相机捕捉手部抓取姿态,触觉外设记录接触力度。多模态信息对齐之后,才是一份完整可用来学习人类操作逻辑的数据。

一体机形态也解决了场景的桎梏。很多数采方案拖着主机、线缆,只能局限在实验室厂房。创维Ego整机一体化设计,采集人员佩戴设备,就可以走进家庭、办公室、工厂,捕捉真实环境里的自然行为:遮挡、复杂光照、操作失误、突发干扰,这些都是实验室仿真很难复刻的高价值训练素材。

04.

从样机到规模化交付:打通采集 传输 标注全链路

具身智能行业一个普遍痛点:样机演示效果亮眼,一旦要几十上百台设备批量落地,就会遇到量产、品控、数据管线的重重难题。

创维XR依托集团成熟制造供应链,拥有符合ISO/IEC17025标准的检测能力,覆盖EMC、可靠性、信号性能等硬件测试;IMU标定、相机标定、SLAM算法全栈自研,已经完成数采设备量产落地,品控体系可以支撑上百台级别设备批量交付部署。

硬件之外,整套软件链路也一并补齐。配套手机EgoVisionAPP,可以做设备绑定、实时画面预览、采集启停、时间同步校验;当采集设备扩展到几十、几百台时,数据如何从现场送到后续流程,会演变成实际工程问题。创维 Ego 配套手机 APP,采集完成后通过 WiFi 上传,工作流简化为:设备采集 → 手机连接 → WiFi 上传 → 后续处理。后台运营平台支持工单管理、设备远程监控、批量数据回传。

05.

结语与未来:

斯坦福大学HAI《AI Index Report 2026》报告指出:RLBench仿真基准下的机器人操作成功率已推高至89.4%;而在包含1000项日常家务、模拟真实家庭环境的BEHAVIOR-1K基准测试中,顶尖团队的完整任务成功率仅为12.4%。值得注意的是,这12.4%仍是在仿真环境中取得的成绩,一旦走进光照、遮挡、物体形变都不可控的真实物理世界,差距只会进一步放大。这道鸿沟,恰恰反衬出高质量真实交互数据的稀缺。

千万小时级别的数据缺口摆在行业面前,但一小时录制视频,不等于一小时高质量训练数据。未来Ego数采比拼的,是谁能用更低成本,稳定产出时空对齐、模态完整、贴近真实世界的训练素材。

XR厂商做Ego采集,本质是把空间感知、多传感器同步、整机工程的积累复用至新赛道。E2/E6/E8梯度化产品矩阵,搭配外设生态与软件平台,创维XR交出了自己的解法。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
又一零食塌房!记者暗访画面恶心至极,发黄又生虫,不少人天天吃

又一零食塌房!记者暗访画面恶心至极,发黄又生虫,不少人天天吃

旧窗老街
2026-08-19 19:18:59
欧阳妮妮给儿子办周岁宴,两家人都来,妹妹欧阳娜娜给小外甥庆生

欧阳妮妮给儿子办周岁宴,两家人都来,妹妹欧阳娜娜给小外甥庆生

喜欢历史的阿繁
2026-09-09 04:14:41
大型翻车现场!美网总监彻底尴尬赛前冷落郑钦文如今被她反向带飞

大型翻车现场!美网总监彻底尴尬赛前冷落郑钦文如今被她反向带飞

有态度网友19ILam
2026-09-09 07:41:38
WTT澳门冠军赛:国乒遭受重创!全国冠军输美国,世界冠军输埃及

WTT澳门冠军赛:国乒遭受重创!全国冠军输美国,世界冠军输埃及

十点街球体育
2026-09-09 15:32:18
“这桃花眼,是天赐的面相!”女孩宗祠领奖照走红,专业让人绝望

“这桃花眼,是天赐的面相!”女孩宗祠领奖照走红,专业让人绝望

世界圈
2026-09-02 14:51:36
我发现:孩子长大,怨恨的不是管太严的父母,而是大人不尊重孩子

我发现:孩子长大,怨恨的不是管太严的父母,而是大人不尊重孩子

棉花糖妈妈
2026-09-09 09:36:41
李泽楷34岁女友罕露脸,与姐妹庆生打扮淡雅,卖掉豪宅后养尊处优

李泽楷34岁女友罕露脸,与姐妹庆生打扮淡雅,卖掉豪宅后养尊处优

小嵩
2026-09-09 13:19:56
伟人接见清朝的禁卫军大臣,定职之后对方落泪:知我者主席也 

伟人接见清朝的禁卫军大臣,定职之后对方落泪:知我者主席也 

纪实文录
2025-06-10 16:53:50
国米败走伯纳乌,出现巨大失误的一门马丁内斯被媒体和球迷送上了被告席

国米败走伯纳乌,出现巨大失误的一门马丁内斯被媒体和球迷送上了被告席

狗哥是一名内拉
2026-09-09 15:11:08
美国给赖清德发错误信号后,赖清德遭到两大重磅打击,不简单

美国给赖清德发错误信号后,赖清德遭到两大重磅打击,不简单

DS北风
2026-09-09 15:46:05
一个普通家庭的自述:我们攒了半辈子攒下100万,可50万的彩礼,我真的舍不得拿出手

一个普通家庭的自述:我们攒了半辈子攒下100万,可50万的彩礼,我真的舍不得拿出手

捣蛋窝
2026-09-08 09:09:40
匈牙利驱逐10名俄罗斯外交官

匈牙利驱逐10名俄罗斯外交官

新华社
2026-09-08 17:45:02
永不再婚!陈妍希自曝怪癖,坦言离婚真实原因,她和维嘉是同类人

永不再婚!陈妍希自曝怪癖,坦言离婚真实原因,她和维嘉是同类人

橙星文娱
2026-09-08 08:26:49
星宇股份违规,国外车企纷纷回应,唯独中国车企们一声不吭!网友:西药见效快

星宇股份违规,国外车企纷纷回应,唯独中国车企们一声不吭!网友:西药见效快

大白聊IT
2026-09-06 23:38:18
早上九点!男篮迎来亚运会首秀,郭士强带队欲轻取开门红!CCTV5直播

早上九点!男篮迎来亚运会首秀,郭士强带队欲轻取开门红!CCTV5直播

大卫的篮球故事
2026-09-08 20:49:32
“身材高挑匀称就是不体面!”接娃宝妈被拍,网友:给自己贴个膜就出门了?

“身材高挑匀称就是不体面!”接娃宝妈被拍,网友:给自己贴个膜就出门了?

林林先生
2026-09-08 10:48:39
曹德旺当年反对女儿嫁给厦大高材生,理由只有一句:他太优秀了!14年后,这个女婿拿到的不是聘书,而是福耀的一份重任

曹德旺当年反对女儿嫁给厦大高材生,理由只有一句:他太优秀了!14年后,这个女婿拿到的不是聘书,而是福耀的一份重任

背包旅行
2026-09-03 15:48:21
越南废除了汉字、韩国废除了汉字、日本也废除了汉字,结果呢?

越南废除了汉字、韩国废除了汉字、日本也废除了汉字,结果呢?

乌克兰小静
2026-09-09 08:28:59
午后突变,全线拉升!发生了什么?

午后突变,全线拉升!发生了什么?

中国基金报
2026-09-09 14:46:37
57位开国上将中,为何宋时轮争议最大,甚至被认为“过大于功”?

57位开国上将中,为何宋时轮争议最大,甚至被认为“过大于功”?

掠影后有感
2026-09-07 10:26:32
2026-09-09 17:19:00
机器人大讲堂 incentive-icons
机器人大讲堂
立德机器人平台,是一个集媒体品牌、智库咨询、投资孵化、引智招商为一体的机器人垂直领域服务平台
7053文章数 4602关注度
往期回顾 全部

科技要闻

AI重大突破!OpenAI称解开近百年数学难题

头条要闻

柬埔寨诈骗窝点内部照片流出:有带手术室的医院、电椅

头条要闻

柬埔寨诈骗窝点内部照片流出:有带手术室的医院、电椅

体育要闻

16年后再破门,被皇马放弃的少年没认输

娱乐要闻

郭德纲的商业版图,藏着不知道的真相

财经要闻

8月CPI同比涨0.8% PPI环比由降转涨

汽车要闻

魏牌全新蓝山申报信息曝光 方盒子造型 5/6座可选

态度原创

本地
手机
旅游
公开课
军事航空

本地新闻

宁波,中国制造的隐藏大佬

手机要闻

荣耀Magic9系列官宣9月28日发布

旅游要闻

在博斯普鲁斯海峡赴一场落日之约

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

停止互袭首都3天后 俄乌猛烈交火

无障碍浏览 进入关怀版