組織病理学的画像は、肝がんを診断するための黄金律です。ただし、計算病理学における完全デジタル診断の精度は向上する必要があります。本稿では、病理組織画像のマルチラベルと低い分類精度の問題を解決するために、マルチラベルの病理組織画像を分類するための局所的に深い畳み込みスイムフレームワーク(LDCSF)を提案します。ローカル視野診断結果を提供できるようにするために、Swin 変換モジュール、ローカル深度畳み込み (LDC) モジュール、特徴再構成 (FR) モジュール、および ResNet モジュールで構成される LDCSF モデルを提案します。 Swin 変換モジュールは、各ウィンドウに対するアテンションを制限することで、アテンション メカニズムによって生成される計算量を削減します。次に、LDC はアテンション マップを再構築し、複数のチャネルで畳み込み演算を実行し、結果の特徴マップを次の層に渡します。 FR モジュールは、チャネルから取得した対応する重み係数ベクトルを使用して、元の特徴マップ ベクトル行列との内積を計算し、代表的な特徴マップを生成します。最後に、残差ネットワークは最終的な分類タスクを実行します。その結果、間質部、壊死、非腫瘍、腫瘍のLDCSFの分類精度はそれぞれ0.9460、0.9960、0.9808、0.9847に達した。最後に、マルチラベル病理画像分類の結果を使用して、腫瘍対間質比を計算します。これは、肝がん組織病理画像の微小環境解析の基礎となります。次に、肝がんのマルチラベル組織病理学画像をリリースしました。コードとデータは https://github.com/panliangrui/LSF で入手できます。
Histopathological images are the gold standard for diagnosing liver cancer. However, the accuracy of fully digital diagnosis in computational pathology needs to be improved. In this paper, in order to solve the problem of multi-label and low classification accuracy of histopathology images, we propose a locally deep convolutional Swim framework (LDCSF) to classify multi-label histopathology images. In order to be able to provide local field of view diagnostic results, we propose the LDCSF model, which consists of a Swin transformer module, a local depth convolution (LDC) module, a feature reconstruction (FR) module, and a ResNet module. The Swin transformer module reduces the amount of computation generated by the attention mechanism by limiting the attention to each window. The LDC then reconstructs the attention map and performs convolution operations in multiple channels, passing the resulting feature map to the next layer. The FR module uses the corresponding weight coefficient vectors obtained from the channels to dot product with the original feature map vector matrix to generate representative feature maps. Finally, the residual network undertakes the final classification task. As a result, the classification accuracy of LDCSF for interstitial area, necrosis, non-tumor and tumor reached 0.9460, 0.9960, 0.9808, 0.9847, respectively. Finally, we use the results of multi-label pathological image classification to calculate the tumor-to-stromal ratio, which lays the foundation for the analysis of the microenvironment of liver cancer histopathological images. Second, we released a multilabel histopathology image of liver cancer, our code and data are available at https://github.com/panliangrui/LSF.