网易首页 > 网易号 > 正文 申请入驻

IROS 2026 特写|因时机器人联合高校开源HandEdit数据集与评测基准

0
分享至

本文将带你走进 IROS 2026 精英晚宴联合主办方——因时机器人,了解因时联合高校构建超 2 亿图像编辑样本的数据集与评测标准 HandEdit。

从人手数据到灵巧手,含超过 2 亿图像编辑样本的数据集 HandEdit 正式开源!值得一提的是,在灵巧手数据采集环节,HandEdit 所使用的灵巧手硬件,来自因时机器人。

9月28日晚,作为 联合主办方之一,因时的技术负责人也将亲临现场,拆解技术路径与前瞻洞见,也与你面对面聊新机会。


报名即将截止,席位有限、欲报从速!

近日,因时机器人联合复旦大学、上海交通大学等高校及科研机构,正式开源HandEdit数据集与评测基准,聚焦第一视角人类到机器人灵巧手图像编辑,为灵巧操作学习提供规模化数据资源与标准化评价依据。

一、从人手数据到灵巧手,操作学习面临“数据适配”难题

抓取、旋转、按压、装配等精细操作,对灵巧手的抓握、感知能力和控制精度提出了更高要求。但与硬件能力快速发展相比,机器人操作数据的积累仍存在明显不足。

传统机器人数据采集往往依赖遥操作、动作捕捉或真实机器人反复执行任务,不仅采集成本高、周期长,而且受到本体结构的限制,不同灵巧手在手指数量、关节结构、尺寸及运动范围等方面存在差异,同一套操作数据也难以直接迁移至不同机器人平台。


另一方面,互联网上已经积累了大量人手操作视频,但由于人手与灵巧手在结构、自由度等方面存在差异,如何将这些人手操作信息有效转化为灵巧手可学习、可执行的数据,成为灵巧操作学习进一步发展的关键问题。

HandEdit针对这一数据适配问题进行探索。

二、2亿级样本覆盖26种构型,让真实操作数据“转译”为机器人数据

HandEdit是研究第一视角人类到机器人灵巧手图像编辑,在保持原始场景和动作意图的基础上,将画面中的人手或手臂替换为指定的机器人构型。围绕这一任务,HandEdit 提供了配对数据、统一评测协议和开源工具,供相关方法训练与比较使用。


这并非简单的“换手”视觉特效,编辑结果既要完整移除原人手,又要保持物体状态、接触关系和背景不变;新生成的机器人还需符合目标 URDF 所规定的结构、材质与关节形态。


因此,HandEdit需要同时处理场景理解、动作保持、机器人构型一致性以及手物交互关系等多个维度。

因时机器人DFX、G2系列灵巧手作为重要的构型,被纳入这一数据转换链路。
在咖啡机操作中,因时DFX系列灵巧手以HandEdit为桥梁,完成了从“人类演示”到“机器人执行”的转化。



HandEdit生成框架可保留原始场景与动作意图,同时将人手轨迹自动映射为DFX灵巧手的原生关节运动。在搅拌机抓取等测试中,DFX根据自身关节限位与参数,实时输出适配的旋转角度、接触位置和手指弯曲姿态,确保每一帧动作均处于目标机器人的物理可达范围内。


目前,HandEdit已构建超过2亿个图像编辑样本,覆盖26种URDF构型,包括13种独立灵巧手和13种手臂一体结构,覆盖600多个场景、1100余种物体和400多类任务,并配套统一评测体系,为机器人操作学习提供了更大规模的数据基础,也为人手操作数据向机器人操作数据的转化提供新的技术路径。

三、因时机器人以真实硬件经验参与数据构建,共建操作学习新路径

作为此次开源的参与方,因时机器人的核心竞争力并非局限于数据集本身,而是植根于对灵巧手硬件的长期深耕。十年专注灵巧操作底层技术,因时已构建起覆盖核心算法、元器件研制、传感器集成到整机量产的全栈自研体系,打破多项技术壁垒,拥有多款成熟产品,在结构构型、驱动控制、传感反馈与抓取模式等方面积淀了深厚的物理经验。


HandEdit 以真实灵巧手URDF为构型约束,将大规模人类操作视频转化为多具身机器人视角数据,并建立统一的人-机器人手部图像编辑评测基准,为人手数据走向机器人学习提供可复用的数据与评价接口。未来,因时机器人将持续聚焦灵巧操作,沿硬件构型定义数据、数据服务算法的方向深耕,为灵巧操作研究与应用提供真正可用的硬件平台。

HandEdit数据集与评测基准已正式开放,面向学术界与产业界研究人员、开发者开放使用。

项目主页:
https://handedit.github.io/

论文全文:
https://arxiv.org/abs/2608.12122

开源代码:
https://github.com/HandEdit/HandEdit

开放数据:
https://huggingface.co/datasets/HandEdit/HandEdit


9月28日晚@美国匹兹堡

「IROS 2026 群星闪耀 精英晚宴」

免费报名,期待线下见面!

北京时间9月25日(周五) 12:00截止报名

-The End-

本周上新!

扫码观看!

“AI技术流”原创投稿计划

TechBeat是由将门创投建立的AI学习社区(www.techbeat.net)。社区上线700+期talk视频,3000+篇技术干货文章,方向覆盖CV/NLP/ML/Robotis等;每月定期举办顶会及其他线上交流活动,不定期举办技术人线下聚会交流活动。我们正在努力成为AI人才喜爱的高质量、知识型交流平台,希望为AI人才打造更专业的服务和体验,加速并陪伴其成长。

投稿内容

// 最新技术解读/系统性知识分享 //

// 前沿资讯解说/心得经历讲述 //

投稿须知

稿件需要为原创文章,并标明作者信息。

我们会选择部分在深度技术解析及科研心得方向,对用户启发更大的文章,做原创性内容奖励

投稿方式

发送邮件到

yimingzhang@thejiangmen.com

或添加工作人员微信(aceyiming)投稿,沟通投稿详情

关于我“门”

将门是一家以专注于数智核心科技领域的新型创投机构,也是北京市标杆型孵化器。 公司致力于通过连接技术与商业,发掘和培育具有全球影响力的科技创新企业,推动企业创新发展与产业升级。

将门成立于2015年底,创始团队由微软创投在中国的创始团队原班人马构建而成,曾为微软优选和深度孵化了126家创新的技术型创业公司。

如果您是技术领域的初创企业,不仅想获得投资,还希望获得一系列持续性、有价值的投后服务,欢迎发送或者推荐项目给我“门”:

bp@thejiangmen.com


点击右上角,把文章分享到朋友圈

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
杭州临平发生刑案致2死,嫌犯畏罪自杀,涉事别墅区物业:推测嫌疑人跟随业主进入小区;周边商户:一名死者30岁左右,平时对人很客气

杭州临平发生刑案致2死,嫌犯畏罪自杀,涉事别墅区物业:推测嫌疑人跟随业主进入小区;周边商户:一名死者30岁左右,平时对人很客气

台州交通广播
2026-11-10 02:09:01
两人已拍拖多年,早被监听发现,事发后黄仁勋很果断,黄乐很聪明

两人已拍拖多年,早被监听发现,事发后黄仁勋很果断,黄乐很聪明

朗威谈星座
2026-11-09 20:50:54
黄仁勋为了业绩都跟客户睡觉了,我们为什么不可以?

黄仁勋为了业绩都跟客户睡觉了,我们为什么不可以?

News脑洞
2026-11-09 15:22:46
蓉城回成都!大巴接机+红毯铺地,球员有说有笑,球迷:欢迎亚军

蓉城回成都!大巴接机+红毯铺地,球员有说有笑,球迷:欢迎亚军

二疯说球
2026-11-09 22:18:35
再见了,陈坤,再见了,黄晓明,中国演艺圈迎“新四大小生”时代

再见了,陈坤,再见了,黄晓明,中国演艺圈迎“新四大小生”时代

皮皮电影
2026-11-09 09:26:00
湖南湘潭一女子买早餐时余额不足,银行卡里近26万不翼而飞,当事人:短信提醒被取消,余额六天内分多笔被转走,银行:疑遭电诈,建议报案

湖南湘潭一女子买早餐时余额不足,银行卡里近26万不翼而飞,当事人:短信提醒被取消,余额六天内分多笔被转走,银行:疑遭电诈,建议报案

台州交通广播
2026-11-10 08:38:36
乒协公布混团世界杯参赛名单

乒协公布混团世界杯参赛名单

界面新闻
2026-11-10 09:38:12
莫斯科“中国城”等地数百年轻人被捕!还收到征兵传票

莫斯科“中国城”等地数百年轻人被捕!还收到征兵传票

项鹏飞
2026-11-09 19:20:37
一通电话叫来黄仁勋,黄乐到底是谁?

一通电话叫来黄仁勋,黄乐到底是谁?

凤凰网财经
2026-11-10 00:03:02
石破天惊的发现,中国汉字已正式推至7000年前,别再纠结夏朝了

石破天惊的发现,中国汉字已正式推至7000年前,别再纠结夏朝了

小豫讲故事
2026-11-09 12:10:25
特朗普质疑中期选举公正性:部分提前投票的批量票源规模大到离谱,无论多少人去现场投票,都根本不可能翻盘,问题全都出在投票机器上

特朗普质疑中期选举公正性:部分提前投票的批量票源规模大到离谱,无论多少人去现场投票,都根本不可能翻盘,问题全都出在投票机器上

极目新闻
2026-11-10 07:38:51
搬家公司9公里收费13900元,不给钱就扣货,威胁“你家就在这跑不掉”……警方打掉两个家族式“套路搬”团伙,近百人落网

搬家公司9公里收费13900元,不给钱就扣货,威胁“你家就在这跑不掉”……警方打掉两个家族式“套路搬”团伙,近百人落网

封面新闻
2026-11-09 16:20:46
黄乐是怎么被盯上的?从一箱没拆封的英伟达芯片说起

黄乐是怎么被盯上的?从一箱没拆封的英伟达芯片说起

迷世书童
2026-11-09 15:19:32
黄克诚带队转移,发现警卫员总走在最前,想起侦察员那句提醒

黄克诚带队转移,发现警卫员总走在最前,想起侦察员那句提醒

纪史行者
2026-11-08 08:10:16
女子和情夫山上发生关系,嫌情夫不肯开房太小气,两人吵起来,女子再次被发现身上盖满石块

女子和情夫山上发生关系,嫌情夫不肯开房太小气,两人吵起来,女子再次被发现身上盖满石块

丫头舫
2026-11-09 22:14:32
全球首个长内容AI流媒体「Glanze」,让一万个平行宇宙找到落点

全球首个长内容AI流媒体「Glanze」,让一万个平行宇宙找到落点

极客电影
2026-09-11 18:02:52
黄仁勋台北爱情故事

黄仁勋台北爱情故事

凤凰网财经
2026-11-09 16:36:34
性生活是不是人的刚需?网友说:男性性生活是刚需,女性不是!

性生活是不是人的刚需?网友说:男性性生活是刚需,女性不是!

黯泉
2026-11-09 17:39:59
妻子被迫后喜欢上偷情,情夫是邻居,2012年丈夫怒杀妻子情人

妻子被迫后喜欢上偷情,情夫是邻居,2012年丈夫怒杀妻子情人

汉史趣闻
2026-11-09 10:00:08
俄方长期将战损列为国家机密,黑客却泄露出记录:近40万俄罗斯人在俄乌冲突中丧生

俄方长期将战损列为国家机密,黑客却泄露出记录:近40万俄罗斯人在俄乌冲突中丧生

14号观星辰
2026-11-09 18:14:49
2026-11-10 11:04:49
将门创投 incentive-icons
将门创投
加速及投资技术驱动型初创企业
2538文章数 597关注度
往期回顾 全部

科技要闻

最强Claude来了!8天从零写出电脑系统

头条要闻

陕西一民办小学卖惨骗捐被查封 女校长等多人被抓

头条要闻

陕西一民办小学卖惨骗捐被查封 女校长等多人被抓

体育要闻

大连足球这些年的起落,都从他身边经过

娱乐要闻

整个内娱为了她俩“画地为牢”?

财经要闻

72岁王健林重回“一号位”

汽车要闻

雨中的埃安Ray7,有点上头

态度原创

健康
艺术
数码
家居
手机

痘痘长到25岁还没完?查查内分泌

艺术要闻

点开前以为只是玫瑰,点开后:这画得也太美艳了!

数码要闻

华为新款鸿蒙折叠电脑外观公布:展开后为14.7英寸

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

iPhone Duo屏幕开裂原因确认 苹果不会进行召回

无障碍浏览 进入关怀版