跳转至

AttriMIL

AttriMIL: Revisiting attention-based multiple instance learning for whole-slide pathological image classification from a perspective of instance attributes

data:

Camelyon16(Ehteshami Bejnordi 等,2017)

Camelyon17(Bandi 等,2018)

BCNB(Xu 等,2021)

TCGA-NSCLC, 2

UniToPatho(Barbano 等,2021 )。

code: Github

引言

基于注意力机制的 MIL 框架和 AttriMIL 的图示。

问题:

首先,注意力分数并不总是实例属性的可靠指标。基于注意力机制的 MIL 的输出由注意力机制和包分类头共同决定。因此,仅仅依靠注意力权重进行实例区分是一种不完整且可能产生误导的解决方案。

其次,实例独立的假设限制了 MIL 框架对实例之间内在相关性进行建模的能力。些相关性可分为载玻片内相关性和载玻片间相关性。

相关工作

基于实例的 MIL

基于实例的 MIL 的核心思想是训练实例分类器,然后聚合实例预测以进行包分类。

基于包的 MIL

方法

(1)多分支属性评分

(2)区域属性约束

(3)滑动属性约束

提出的 AttriMIL 概述。

img

结果

image-20250526101559481

image-20250526101623484

参考文献

Cai, Linghan et al. “Rethinking Attention-Based Multiple Instance Learning for Whole-Slide Pathological Image Classification: An Instance Attribute Viewpoint.” ArXiv abs/2404.00351 (2024): n. pag.