マルチインスタンス学習は組織病理学データの理想的な分析モードであり、通常、膨大なスライド画像全体に単一のグローバルラベルの注釈が付けられます。このような場合、スライド画像全体が、集約および分類される組織パッチの集合としてモデル化されます。この分類を実行するための一般的なモデルには、リカレント ニューラル ネットワークとトランスフォーマーが含まれます。各パッチの次元を削減するために事前にディープトレーニングされたニューラルネットワークなどの強力な圧縮アルゴリズムが使用されていますが、スライド画像全体から生じるシーケンスは非常に長いままであり、通常は数万のパッチが含まれています。構造化状態空間モデルは、シーケンス モデリングの新たな代替手段であり、特に長いシーケンスの効率的なモデリングのために設計されています。これらのモデルは、入力シーケンスのメモリ ユニットへの最適な投影を呼び出し、シーケンス全体を圧縮します。この論文では、デジタル パソロジーのさまざまな問題に対する複数のインスタンスの学習者として状態空間モデルを使用することを提案します。転移検出、がんのサブタイピング、変異分類、マルチタスク学習の実験を通じて、この新しいクラスのモデルが既存の最先端のアプローチと競合できることを実証します。私たちのコードは https://github.com/MICS-Lab/s4_digital_pathology で入手できます。
Multiple instance learning is an ideal mode of analysis for histopathology data, where vast whole slide images are typically annotated with a single global label. In such cases, a whole slide image is modelled as a collection of tissue patches to be aggregated and classified. Common models for performing this classification include recurrent neural networks and transformers. Although powerful compression algorithms, such as deep pre-trained neural networks, are used to reduce the dimensionality of each patch, the sequences arising from whole slide images remain excessively long, routinely containing tens of thousands of patches. Structured state space models are an emerging alternative for sequence modelling, specifically designed for the efficient modelling of long sequences. These models invoke an optimal projection of an input sequence into memory units that compress the entire sequence. In this paper, we propose the use of state space models as a multiple instance learner to a variety of problems in digital pathology. Across experiments in metastasis detection, cancer subtyping, mutation classification, and multitask learning, we demonstrate the competitiveness of this new class of models with existing state of the art approaches. Our code is available at https://github.com/MICS-Lab/s4_digital_pathology.