スライド全体の画像(WSI)は解像度が高く、通常はローカライズされた注釈がありません。スライドレベルのラベルしか使用できない場合、WSI分類はマルチインスタンス学習(MIL)問題としてキャストできます。ローカライズされた注釈を必要としないWSI分類とWSIでの腫瘍検出のためのMILベースの方法を提案します。まず、トレーニング可能な距離測定を使用して、デュアルストリームアーキテクチャのインスタンスの関係をモデル化する新しいMILアグリゲーターを提案します。第2に、WSIはMILモデルのトレーニングを妨げる大きなバッグまたは不均衡なバッグを生成する可能性があるため、自己教師あり対照学習を使用してMILの適切な表現を抽出し、大きなバッグの法外なメモリ要件の問題を軽減することを提案します。第三に、分類とローカリゼーションの精度をさらに向上させるマルチスケールWSI機能のピラミッド型融合メカニズムを提案します。モデルの分類精度は、完全に監視された方法と比べて遜色なく、2つの代表的なWSIデータセットの精度ギャップは2%未満であり、以前のすべてのMILベースの方法よりも優れています。標準のMILデータセットのベンチマーク結果は、一般的なMIL問題で他のMILモデルよりも優れたMILアグリゲーターのパフォーマンスをさらに示しています。
Whole slide images (WSIs) have large resolutions and usually lack localized annotations. WSI classification can be cast as a multiple instance learning (MIL) problem when only slide-level labels are available. We propose a MIL-based method for WSI classification and tumor detection in WSI that does not require localized annotations. First, we propose a novel MIL aggregator that models the relations of the instances in a dual-stream architecture with trainable distance measurement. Second, since WSIs can produce large or unbalanced bags that hinder the training of MIL models, we propose to use self-supervised contrastive learning to extract good representations for MIL and alleviate the issue of prohibitive memory requirement for large bags. Third, we propose a pyramidal fusion mechanism for multiscale WSI features that further improves the classification and localization accuracy. The classification accuracy of our model compares favorably to fully-supervised methods, with less than 2% accuracy gap on two representative WSI datasets, and outperforms all previous MIL-based methods. Benchmark results on standard MIL datasets further show the superior performance of our MIL aggregator over other MIL models on general MIL problems.