网易首页 > 网易号 > 正文 申请入驻

Nat Biomed Eng | 李瑞江团队开发通用的多示例学习框架—nnMIL,应用于病理计算

0
分享至


随着计算病理学和病理基础模型(pathology foundation models)的快速发展,现如今研究人员能够从全切片病理图像(whole-slide images,WSIs)中提取具有丰富语义信息的patch-level特征。然而,临床预测最终通常需要在整张切片甚至患者层面做出判断。因此,如何将大量patch特征有效整合为稳定、准确的slide-level预测,是计算病理学中的一个关键问题。

目前,多示例学习(multiple instance learning,MIL)是解决这一问题的主要方法,代表性工作包括 ABMIL1、CLAM【2】、DSMIL【3】和 TransMIL【4】等。这些方法通过设计不同的网络结构,将大量 patch-level 特征聚合为 slide-level 表征。但现有MIL方法仍存在一些不足。首先,由于不同WSI包含的patch数量差异很大,传统MIL训练过程中每次迭代只能处理一张全切片图像(batch size = 1),限制了模型训练的效率和稳定性。其次,现有研究更多关注设计新的MIL网络结构,而对于 batch size、采样策略和训练配置等因素缺乏系统研究。实际上,即使使用相同的网络结构,不同的训练策略也可能带来明显不同的性能。

为了解决这些问题,2026年8月25日,斯坦福大学李瑞江团队在Nature Biomedical Engineering发表了文章nnMIL: a generalizable multiple instance learning framework for computational pathology5】。研究团队受到医学图像分割领域经典方法nnU-Net【6】的启发,提出了nnMIL(no-new MIL),一个简单、通用的多示例学习框架,旨在连接病理基础模型的patch-level特征和slide-level临床预测。与不断设计更加复杂的 MIL 网络不同,nnMIL更加关注如何通过系统优化训练策略,提高模型的性能、稳定性和泛化能力。研究团队在近40,000张 WSI、35个临床任务以及4种病理基础模型上对 nnMIL 进行了系统评估。相关任务涵盖疾病诊断和分型、分子生物标志物预测以及泛癌种预后预测。研究使用了 GigaPath【7】、H-Optimus-0【8】、UNI【9】和 Virchow2【10】四种病理基础模型。7种现有MIL方法相比,nnMIL在不同任务和不同基础模型上总体表现更加稳定,并取得了更好的预测性能。


与现有研究相比,nnMIL有几个主要贡献:

研究思路。现有 MIL 研究通常重点关注设计新的网络结构,而 nnMIL 更强调训练策略本身的重要性。研究表明,相比不断增加模型复杂度,系统优化 MIL 的训练方式同样可以明显提高模型的性能、稳定性和泛化能力。进一步的实验发现,将 nnMIL 的训练策略应用到已有的 ABMIL 和 DSMIL 中,也能够提升这些模型的整体表现,说明这种训练思路并不局限于 nnMIL本身。

技术改进。nnMIL 通过随机采样固定数量的patch,将原本长度不同的输入转换为固定大小的输入,从而实现大batch训练。同时,研究团队进一步加入特征采样和平衡采样,并采用基于规则的参数配置方式,使模型能够更加稳定地适用于不同数据集和任务。其核心思想与 nnU-Net 类似: 与其针对每个数据集反复进行复杂的人工调参,不如将经过验证的经验总结为一套简单、可复用的配置规则。

临床可靠性。nnMIL不仅输出最终的slide-level预测,还能够通过特征维度滑窗推理获得多个预测结果,并进一步估计模型的不确定性。研究发现,不确定性较高的病例更容易出现预测错误,因此可以帮助筛选出需要病理学家进一步复核的复杂病例。对于分子标志物预测,高不确定性的病例也可以进一步考虑进行额外的分子检测。

nnMIL具有广泛的应用前景。随着GigaPath、UNI、Virchow2等病理基础模型不断发展,如何将强大的patch-level特征转化为可靠的slide-level临床预测将变得越来越重要。nnMIL提供了一种简单、通用且易于扩展的解决方案,可以应用于疾病诊断、分子标志物预测和患者预后评估等多种计算病理任务,为病理基础模型进一步走向临床应用提供了新的方法。


图1: nnMIL模型结构及临床验证

https://www.nature.com/articles/s41551-026-01767-8

参考文献

[1] Ilse M., Tomczak J., Welling M. Attention-based deep multiple instance learning. International Conference on Machine Learning, 2127–2136 (2018).

[2] Lu M.Y., et al. Data-efficient and weakly supervised computational pathology on whole-slide images. Nature Biomedical Engineering 5, 555–570 (2021).

[3] Li B., Li Y., Eliceiri K.W. Dual-stream multiple instance learning network for whole slide image classification with self-supervised contrastive learning. IEEE/CVF Conference on Computer Vision and Pattern Recognition, 14318–14328 (2021).

[4] Shao Z., et al. TransMIL: transformer based correlated multiple instance learning for whole slide image classification. Advances in Neural Information Processing Systems 34, 2136–2147 (2021).

[5] Luo X., Xiang J., Ji Y., Li R. nnMIL: a generalizable multiple instance learning framework for computational pathology. Nature Biomedical Engineering (2026). https://doi.org/10.1038/s41551-026-01767-8.

[6] Isensee F., Jaeger P.F., Kohl S.A., Petersen J., Maier-Hein KH. nnU-Net: a self-configuring method for deep learning-based biomedical image segmentation. Nature Methods 18, 203–211 (2021).

[7] Xu H., et al. A whole-slide foundation model for digital pathology from real-world data. Nature 630, 181–188 (2024).

[8] Saillard C., et al. H-optimus-0. https://github.com/bioptimus/releases/tree/main/models/h-optimus/v0 (2024).

[9] Chen R.J., et al. Towards a general-purpose foundation model for computational pathology. Nature Medicine 30, 850–862 (2024).

[10] Zimmermann E., et al. Virchow2: scaling self-supervised mixed magnification models in pathology. arXiv:2408.00738 (2024).

学术合作组织

(*排名不分先后)


战略合作伙伴

(*排名不分先后)

推荐直播

转载须知

【非原创文章】本文著作权归文章作者所有,欢迎个人转发分享,未经作者的允许禁止转载,作者拥有所有法定权利,违者必究。

BioArt

Med

Plants

人才招聘


点击主页推荐活动

关注更多最新活动!


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
被中国制裁全家的菲防长,在首尔论坛突然掏出纸条,当众挑衅中国

被中国制裁全家的菲防长,在首尔论坛突然掏出纸条,当众挑衅中国

墨兰史书
2026-09-10 04:10:03
尼科·帕斯欧冠征服莱比锡!不用复刻梅西,他是阿根廷下一代中场核心

尼科·帕斯欧冠征服莱比锡!不用复刻梅西,他是阿根廷下一代中场核心

体育闲话说
2026-09-11 07:50:03
公职人员李某用AI写方案,被单位严肃处理

公职人员李某用AI写方案,被单位严肃处理

台州交通广播
2026-09-10 01:14:30
约基奇:名气带给我的困扰越来越大 太想念以前的日子了

约基奇:名气带给我的困扰越来越大 太想念以前的日子了

北青网-北京青年报
2026-09-11 08:25:03
女篮长集训一个没打出来?多人世界杯接近隐身被调侃张子宇陪练

女篮长集训一个没打出来?多人世界杯接近隐身被调侃张子宇陪练

狼叔评论
2026-09-11 00:16:44
彻底弃用!巴萨 10 亿违约金天才陷入绝境!弗里克直接放弃

彻底弃用!巴萨 10 亿违约金天才陷入绝境!弗里克直接放弃

澜归序
2026-09-11 08:02:22
辣眼睛!得7分送14分,杀敌200自损1000,球迷:以她为基石没未来

辣眼睛!得7分送14分,杀敌200自损1000,球迷:以她为基石没未来

南海浪花
2026-09-11 07:27:01
吉利固态电池下线并装车:续航破1000km,寿命超100万公里

吉利固态电池下线并装车:续航破1000km,寿命超100万公里

生活魔术专家
2026-09-09 00:50:00
宝格丽越南公关回应刘亦菲裁照:没获对方许可,裁掉胡玉荷是规矩

宝格丽越南公关回应刘亦菲裁照:没获对方许可,裁掉胡玉荷是规矩

新金牌娱乐观察家
2026-09-10 11:16:36
中小学生流行“吃作业”?糯米纸印上作业样式宣称为“解压神器”,部分产品违规使用食品添加剂、非食品原料!多地提醒

中小学生流行“吃作业”?糯米纸印上作业样式宣称为“解压神器”,部分产品违规使用食品添加剂、非食品原料!多地提醒

鲁中晨报
2026-09-10 13:47:08
一家民企的终极防御:既然我犯法,那把这27家同行全抓了吧

一家民企的终极防御:既然我犯法,那把这27家同行全抓了吧

有戏
2026-09-07 14:49:53
该来的来了!一日系品牌暴跌52%,曾经的“半壁江山”,勉强过万

该来的来了!一日系品牌暴跌52%,曾经的“半壁江山”,勉强过万

小李车评李建红
2026-09-11 08:00:03
“断子绝孙”还有救?联合国曾预言:2050年,中国人口将出乎意料

“断子绝孙”还有救?联合国曾预言:2050年,中国人口将出乎意料

悦心知足
2026-08-23 03:55:40
港媒:参与“港独”组织并犯“串谋分裂国家罪”,两男子被判入狱

港媒:参与“港独”组织并犯“串谋分裂国家罪”,两男子被判入狱

环球网资讯
2026-09-10 15:21:05
《街霸》电影春丽演员苦练大腿!每天狂吃12个鸡蛋

《街霸》电影春丽演员苦练大腿!每天狂吃12个鸡蛋

3DM游戏
2026-08-29 11:32:21
如果长沙男童“摸臀”事件发生在美国,会是什么结果?

如果长沙男童“摸臀”事件发生在美国,会是什么结果?

西虹市闲话
2026-09-09 16:34:34
内塔尼亚胡和卡茨发表联合声明:使用超过1100吨炸药摧毁黎南部真主党地下设施,在地道内发现了伊朗制造的火箭弹、导弹和无人机等

内塔尼亚胡和卡茨发表联合声明:使用超过1100吨炸药摧毁黎南部真主党地下设施,在地道内发现了伊朗制造的火箭弹、导弹和无人机等

政知新媒体
2026-09-11 07:51:04
墙皮都烧卷了,值班员还在电话里“走流程”:“领导咋整?”

墙皮都烧卷了,值班员还在电话里“走流程”:“领导咋整?”

小鹿姐姐情感说
2026-09-08 05:34:56
为什么有钱后一定要低调?网友:我爸8000万身家,几年负债1000万

为什么有钱后一定要低调?网友:我爸8000万身家,几年负债1000万

夜深爱杂谈
2026-08-30 20:56:54
偶遇曾经发生过关系的异性,会冲动吗?网友:如果女方越来越漂亮,男的还会释然吗

偶遇曾经发生过关系的异性,会冲动吗?网友:如果女方越来越漂亮,男的还会释然吗

带你感受人间冷暖
2026-09-11 00:05:28
2026-09-11 08:40:49
BioArt incentive-icons
BioArt
探索生物艺术之奥秘
11096文章数 18542关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

牛弹琴:玩危险游戏 阿联酋快把阿拉伯兄弟们得罪光了

头条要闻

牛弹琴:玩危险游戏 阿联酋快把阿拉伯兄弟们得罪光了

体育要闻

16岁的国产小库里,还有多少功课要做

娱乐要闻

参加晚宴,刘亦菲因合照深陷争议

财经要闻

向松祚:年轻人不必过早买房

汽车要闻

标配全线控底盘 全新一代智己LS6预售20.99万起

态度原创

本地
艺术
亲子
家居
公开课

本地新闻

拼假 13 天国内长线路线合集

艺术要闻

他偷走70箱清宫文物:却在逃亡路上将国宝赠人、丢弃...

亲子要闻

秋天忽冷忽热,劝你别再给孩子穿这种衣服出门…

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版