arXiv reaDer
Adversarial learning of cancer tissue representations
組織病理学画像の深層学習ベースの分析は、腫瘍の進行、腫瘍の微小環境、およびそれらを支える生物学的プロセスの理解を進める上で有望であることを示しています。これまでのところ、これらのアプローチは、注釈に関連する情報の抽出に焦点を合わせてきました。この作品では、組織の構造自体からどれだけの情報を学ぶことができるかを尋ねます。手動の注釈を必要とせずに、癌組織の特徴表現を抽出するための敵対的学習モデルを提示します。これらの表現は、乳房、結腸、肺の3つのがんの種類にまたがるさまざまな形態学的特徴を識別できることを示しています。これは、1)潜在空間における形態的特徴の分離によってサポートされます。 2)教師あり深層モデルに匹敵する0.97のAUCと85%の精度で、潜在表現を使用したロジスティック回帰で組織タイプを分類する機能。 3)マルチインスタンス学習(MIL)を使用して、全スライド画像(WSI)内の腫瘍の存在を予測する機能。これにより、0.98のAUCと94%の精度が達成されます。私たちの結果は、私たちのモデルが実際の組織サンプルの明確な表現型の特徴を捉え、腫瘍の進行と腫瘍の微小環境をさらに理解するための道を開き、最終的に診断と治療のための組織病理学的分類を洗練することを示しています。コードと事前トレーニング済みモデルは、で入手できます。
Deep learning based analysis of histopathology images shows promise in advancing the understanding of tumor progression, tumor micro-environment, and their underpinning biological processes. So far, these approaches have focused on extracting information associated with annotations. In this work, we ask how much information can be learned from the tissue architecture itself. We present an adversarial learning model to extract feature representations of cancer tissue, without the need for manual annotations. We show that these representations are able to identify a variety of morphological characteristics across three cancer types: Breast, colon, and lung. This is supported by 1) the separation of morphologic characteristics in the latent space; 2) the ability to classify tissue type with logistic regression using latent representations, with an AUC of 0.97 and 85% accuracy, comparable to supervised deep models; 3) the ability to predict the presence of tumor in Whole Slide Images (WSIs) using multiple instance learning (MIL), achieving an AUC of 0.98 and 94% accuracy. Our results show that our model captures distinct phenotypic characteristics of real tissue samples, paving the way for further understanding of tumor progression and tumor micro-environment, and ultimately refining histopathological classification for diagnosis and treatment. The code and pretrained models are available at:
updated: Wed Aug 04 2021 18:00:47 GMT+0000 (UTC)
published: Wed Aug 04 2021 18:00:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト