人工知能対応の病理組織学的データ分析は、病理学者にとって貴重なアシスタントとなっています。ただし、既存のモデルは、病理学者のモデルと比較して、特に癌のサブタイプの診断において、表現と推論の能力が不足しており、臨床現場では説得力がありません。たとえば、病理学者は通常、スライドの病変を全体から局所まで観察し、知識と経験に基づいて診断を下すことができます。この論文では、病理学者のような組織病理学的スライドで癌のサブタイプ分類のプロセスを複製するためのデータと知識の協調運転 (D&K) モデルを提案します。具体的には、データ駆動型モジュールでは、アンサンブル学習のバギング メカニズムを活用して、埋め込み表現ユニットによって抽出されたさまざまなバッグからの組織学的特徴を統合します。さらに、心理学のゲシュタルト原理に基づいて知識駆動型モジュールを確立し、3 次元 (3D) の専門知識空間を構築し、組織学的特徴をこの空間にマップしてメトリックを求めます。次に、それらの間のユークリッド距離に従って診断を行うことができます。公開データセットと社内データセットの両方に関する広範な実験結果は、D&K モデルが、組織病理学的サブタイプを診断するための最先端の方法と比較して、高性能で信頼できる結果をもたらすことを示しています。コード: https://github.com/Dennis-YB/Data-and-Knowledge-Co-driving-for-Cancer-Subtypes-Classification
Artificial intelligence-enabled histopathological data analysis has become a valuable assistant to the pathologist. However, existing models lack representation and inference abilities compared with those of pathologists, especially in cancer subtype diagnosis, which is unconvincing in clinical practice. For instance, pathologists typically observe the lesions of a slide from global to local, and then can give a diagnosis based on their knowledge and experience. In this paper, we propose a Data and Knowledge Co-driving (D&K) model to replicate the process of cancer subtype classification on a histopathological slide like a pathologist. Specifically, in the data-driven module, the bagging mechanism in ensemble learning is leveraged to integrate the histological features from various bags extracted by the embedding representation unit. Furthermore, a knowledge-driven module is established based on the Gestalt principle in psychology to build the three-dimensional (3D) expert knowledge space and map histological features into this space for metric. Then, the diagnosis can be made according to the Euclidean distance between them. Extensive experimental results on both public and in-house datasets demonstrate that the D&K model has a high performance and credible results compared with the state-of-the-art methods for diagnosing histopathological subtypes. Code: https://github.com/Dennis-YB/Data-and-Knowledge-Co-driving-for-Cancer-Subtypes-Classification