网易首页 > 网易号 > 正文 申请入驻

MIT团队给机器人装上透视眼,藏在纸箱里的东西也能看见

0
分享至

你知道吗?机器人已经可以看穿纸箱和绕过遮挡物。它能提前知道纸箱里面装了什么,或能帮助网购用户实现隔箱验货,不用再担心快递盒子拆开之后难退货;扫地机器人也能提前知道自己身后是否藏着杂物,从而能够绕道作业。

这些功能的实现基于美国麻省理工学院团队的一系列新成果。他们使用毫米波信号加上最新的AI,造出了一套叫 Wave Former 的系统。这套系统能穿透纸板、塑料、干墙、布料,看见被完全遮挡的物体,还能把物体的完整形状重建出来。


(来源:相关论文)

他们还有另一套叫 RISE 的系统,能利用房间里走动的人,反推出整个房间的布局。

这两项研究的主要作者之一都是 Laura Dodds,她是 MIT 媒体实验室的研究助理。两篇论文都已被 IEEE 计算机视觉与模式识别会议接收。


图 | Laura Dodds(来源:GitHub)

他们用毫米波雷达,就是那种和 Wi-Fi 用相同频段的无线电波来照亮遮挡物后面的物体。毫米波能穿透普通材料,打到物体上再弹回来,就像声呐和雷达的原理一样。

但这里有一个大麻烦,毫米波的反射方式跟光不一样。光照到粗糙表面会向四面八方散开,所以相机能拍到物体的各个面。毫米波却像镜子,只有正好朝向雷达的那一小块表面会把信号弹回来,其他部分会把信号弹向别处。

所以传统方法只能看到物体的正面,侧面和背面完全看不见,就像你站在镜子前只能看见自己的脸,看不见后脑勺。


(来源:相关论文)

Wave Former 的妙处在于,它先用物理学方法从毫米波信号里拼出一块不完整的拼图,然后用生成式 AI 把这个拼图补全。但这又引出一个新问题,AI 需要海量数据训练,可毫米波数据少得可怜,根本不够用。

研究团队的解决办法非常聪明,他们从现有的计算机视觉数据集里找图像,把那些图像改造成毫米波反射的样子。比如,他们故意让图像只保留正面部分,再把其他面随机去掉,再往里面加模拟的噪声,让这些假数据看起来和真实的毫米波反射一模一样。

然后用这些数据训练一个叫 PoInTr 的 AI 模型,让它学会从残缺的拼图里猜出完整形状。

整套系统分三步走。

第一步,毫米波雷达扫描物体,生成一堆候选表面,每个候选表面都是一种可能的猜测。

第二步,把这些猜测喂给训练好的 AI 模型,让模型补全形状。

第三步,从这些补全后的形状里挑一个最好的。他们用了一个叫熵的指标,熵越高意味着越乱越不可靠,他们选熵最低的那个,也就是最整齐最合理的那个形状。

实验里,他们用了 61 种日常物品做测试,从罐头、盒子到扳手、电钻,全部藏在纸板箱或布料后面。Wave Former 的召回率达到了 72%,比第二名高出一大截,而且精准度保持 85%。

这意味着它不仅能找到大部分物体,而且找得准。他们还特意测试了极端情况,当雷达只能看到 18% 的物体表面时,其他方法已经彻底蒙圈,Wave Former 依然能还原出大致形状,误差比对手小了 20%。


(来源:相关论文)

第二项研究 RISE 利用房间里走动的人来重建整个房间的布局。原理是人走路的时候会激发多径反射,信号先打到人身上,再弹到墙上,再弹回雷达,这些鬼影信号平时都被当成噪声扔掉,但它们其实携带着墙壁和家具的信息。Dodds 告诉媒体,通过分析这些反射随时间的变化,就能粗略理解周围环境。


(来源:相关论文)

他们用同样的思路来训练 AI,先造出一堆模拟的多径反射数据,教 AI 理解鬼影和房间布局之间的关系。

测试时,他们让真人拿着雷达在11种不同房间里走了 100 条路线,生成了 5 万帧数据。RISE 系统把房间布局的重建误差从 40 厘米降到了 16 厘米,比对手精准了 60%。它还能同时检测出桌子、柜子、沙发这些家具,交并比达到了 58%。

该团队的负责人、麻省理工学院 Fadel Adib 教授说,他们花了十几年研究怎么让机器人看见遮挡物后面的东西,之前的方法受限于物理原理,精度总提不上去。现在他们用生成式 AI 终于跨过了这道坎,从填补看不见的缝隙到理解整个场景,这是一次质的飞跃。

这套系统目前还依赖真人走动来激发多径反射,如果房间完全没人就失效了。而且毫米波对金属和很厚的墙无能为力。

研究团队下一步要造出专门针对无线信号的基础模型,希望能像 ChatGPT 那样通用,到那时候预计随便一个 Wi-Fi 路由器就能看见整个屋子。

参考资料:

相关论文https://arxiv.org/pdf/2511.14019和https://arxiv.org/pdf/2511.14152

https://news.mit.edu/2026/generative-ai-improves-wireless-vision-system-sees-through-obstructions-0319

https://news.mit.edu/2025/new-imaging-technique-reconstructs-hidden-object-shapes-0701

https://laura-dodds.github.io/

运营/排版:何晨龙

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国际铜价突然跳水 发生了什么?

国际铜价突然跳水 发生了什么?

财联社
2026-09-10 19:33:11
官方回复!南京超大城中村,不拆了~

官方回复!南京超大城中村,不拆了~

说故事的阿袭
2026-09-11 00:46:14
梅根被警告别跟国王叫板!查尔斯签个字就废王子,哈里害怕吗?

梅根被警告别跟国王叫板!查尔斯签个字就废王子,哈里害怕吗?

小椰的奶奶
2026-09-11 03:36:14
随着郑钦文1-2出局,中国金花美网奖金分配出炉,9人总合超990万

随着郑钦文1-2出局,中国金花美网奖金分配出炉,9人总合超990万

南海浪花
2026-09-10 09:44:25
英媒:三笘薫续约布莱顿谈判停滞,明年1月或被低价出售

英媒:三笘薫续约布莱顿谈判停滞,明年1月或被低价出售

懂球帝
2026-09-10 19:14:16
懂球!特朗普:东契奇交易是史上最垃圾的,能不能反悔啊

懂球!特朗普:东契奇交易是史上最垃圾的,能不能反悔啊

懂球帝
2026-09-10 11:29:04
普京与特朗普打了1小时电话,讨论乌克兰危机等问题,俄方称此次通话“富有建设性且非常坦诚”

普京与特朗普打了1小时电话,讨论乌克兰危机等问题,俄方称此次通话“富有建设性且非常坦诚”

每日经济新闻
2026-09-09 23:40:43
刘翔工资卡11年0支出,月均工资才是上海平均工资的一半,让普通人按平均工资缴社保合理吗

刘翔工资卡11年0支出,月均工资才是上海平均工资的一半,让普通人按平均工资缴社保合理吗

Mr王的饭后茶
2026-09-10 16:13:13
金正恩公开表示:对参与“海外军事行动”的朝军士兵给予赞扬;法国媒体确认了:金正恩所说很可能是被派往俄罗斯参与乌克兰战争的朝鲜部队

金正恩公开表示:对参与“海外军事行动”的朝军士兵给予赞扬;法国媒体确认了:金正恩所说很可能是被派往俄罗斯参与乌克兰战争的朝鲜部队

吉刻新闻
2026-09-10 09:58:21
跟何超琼同住14载,至今没领证没生娃没名分,地位早已超越陈百强

跟何超琼同住14载,至今没领证没生娃没名分,地位早已超越陈百强

荒野老五
2026-09-10 06:26:55
越南以为中日会抢着接南北高铁项目,结果万万没想到,日本直接撤了,中国企业从头到尾沉默,连价都懒得报

越南以为中日会抢着接南北高铁项目,结果万万没想到,日本直接撤了,中国企业从头到尾沉默,连价都懒得报

扶苏聊历史
2026-09-09 15:54:30
翁帆为杨振宁研究院揭牌!穿真丝长袍化淡妆,瘦出尖下巴年轻20岁

翁帆为杨振宁研究院揭牌!穿真丝长袍化淡妆,瘦出尖下巴年轻20岁

猪小艳吖
2026-09-09 20:48:36
江苏淮安一男子称“部分洋河梦之蓝放地库14年只剩空瓶”,厂家回应:出现这样问题的原因有很多,有可能是储存问题,目前正在积极沟通

江苏淮安一男子称“部分洋河梦之蓝放地库14年只剩空瓶”,厂家回应:出现这样问题的原因有很多,有可能是储存问题,目前正在积极沟通

台州交通广播
2026-09-10 13:10:29
兵不血刃,曼联4-0横扫沙巴巴库,迎欧冠开门红,4人先后破门

兵不血刃,曼联4-0横扫沙巴巴库,迎欧冠开门红,4人先后破门

侧身凌空斩
2026-09-11 04:53:16
4-1!丁俊晖晋级,8强诞生4席,中国2人晋级,吴宜泽、塞尔比爆冷

4-1!丁俊晖晋级,8强诞生4席,中国2人晋级,吴宜泽、塞尔比爆冷

印度人间美味
2026-09-11 06:07:57
王凯谈近几年接戏不多的原因:不是没戏拍,而是主动选择藏起来

王凯谈近几年接戏不多的原因:不是没戏拍,而是主动选择藏起来

娱说瑜悦
2026-09-10 20:12:25
江西遂川地质灾害致16人遇难

江西遂川地质灾害致16人遇难

界面新闻
2026-09-10 10:39:15
尴尬名场面!赵一鸣官宣“称错赔十倍”没多久,门店称重翻车,17个小面包收65.98元,网友拿到335元赔付

尴尬名场面!赵一鸣官宣“称错赔十倍”没多久,门店称重翻车,17个小面包收65.98元,网友拿到335元赔付

火山詩话
2026-09-10 06:24:25
窦靖童十指紧扣宋妍霏遛狗,闺蜜还是恋人,两年没人敢认

窦靖童十指紧扣宋妍霏遛狗,闺蜜还是恋人,两年没人敢认

阿废冷眼观察所
2026-09-11 02:33:32
不生病口诀,总共4句,建议每个人都背下来!

不生病口诀,总共4句,建议每个人都背下来!

品读时刻
2026-09-10 09:08:30
2026-09-11 07:03:00
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17224文章数 515213关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

外媒:伊朗捕获美国"大鱼"后发了条消息 令五角大楼受挫

头条要闻

外媒:伊朗捕获美国"大鱼"后发了条消息 令五角大楼受挫

体育要闻

16岁的国产小库里,还有多少功课要做

娱乐要闻

参加晚宴,刘亦菲因合照深陷争议

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

标配全线控底盘 全新一代智己LS6预售20.99万起

态度原创

亲子
时尚
房产
游戏
数码

亲子要闻

宝蓝和家人一起去游乐场打水仗,过山车还有恐龙乐园玩的很开心~

“蛇精”围攻,葫芦爷爷求饶

房产要闻

别不服!海南的亿万富豪,只有不到300个!

曝《GTA6》预购破500万份 PS5平台占77%份额

数码要闻

驳斥“运营2.16亿台间谍电视”指控 LG官方声明数据合规并强调用户隐私保护

无障碍浏览 进入关怀版