arXiv reaDer
注意メカニズムに基づく脳腫瘍の 2 段階 MR 画像セグメンテーション法
Two-stage MR Image Segmentation Method for Brain Tumors based on Attention Mechanism
マルチモーダル磁気共鳴画像法 (MRI) は、ヒト組織のさまざまなパターンを明らかにすることができ、臨床診断に不可欠です。ただし、コスト、ノイズ、および手動のラベル付けによって制限され、多様で信頼性の高いマルチモーダル MR 画像を取得することは依然として課題です。同じ病変に対して、異なる MRI 徴候は、背景情報、粗い位置決め、および微細構造に大きな違いがあります。より良い生成とセグメンテーションのパフォーマンスを得るために、サイクル一貫性のある生成的敵対ネットワーク (CycleGAN) に基づく調整空間的注意生成敵対的ネットワーク (CASP-GAN) が提案されています。ジェネレーターのパフォーマンスは、Coordinate Attention (CA) モジュールと Spatial Attention (SA) モジュールを導入することで最適化されます。 2 つのモジュールは、キャプチャされた位置情報を最大限に活用し、関心のある領域を正確に特定し、発電機モデルのネットワーク構造を強化します。元の医用画像の構造情報と詳細情報を抽出する機能により、目的の画像をより高品質に生成することができます。元のCycleGANには、トレーニング時間が長い、パラメータ量が多すぎる、収束しにくいなどの問題があります。この問題に対応するために、Res Block に代わる Coordinate Attention (CA) モジュールを導入してパラメーターの数を減らし、上記の空間情報抽出ネットワークと連携して情報抽出能力を強化します。 CASP-GAN に基づいて、注意生成クロスモダリティ セグメンテーション (AGCMS) メソッドがさらに提案されます。このメソッドは、CASP-GAN によって生成されたモダリティと実際のモダリティを、脳腫瘍のセグメンテーション用のセグメンテーション ネットワークに入力します。実験結果は、ほとんどのタスクで、CASP-GAN が CycleGAN および PSNR、SSMI、RMSE のいくつかの最先端の方法よりも優れていることを示しています。
Multimodal magnetic resonance imaging (MRI) can reveal different patterns of human tissue and is crucial for clinical diagnosis. However, limited by cost, noise and manual labeling, obtaining diverse and reliable multimodal MR images remains a challenge. For the same lesion, different MRI manifestations have great differences in background information, coarse positioning and fine structure. In order to obtain better generation and segmentation performance, a coordination-spatial attention generation adversarial network (CASP-GAN) based on the cycle-consistent generative adversarial network (CycleGAN) is proposed. The performance of the generator is optimized by introducing the Coordinate Attention (CA) module and the Spatial Attention (SA) module. The two modules can make full use of the captured location information, accurately locating the interested region, and enhancing the generator model network structure. The ability to extract the structure information and the detailed information of the original medical image can help generate the desired image with higher quality. There exist some problems in the original CycleGAN that the training time is long, the parameter amount is too large, and it is difficult to converge. In response to this problem, we introduce the Coordinate Attention (CA) module to replace the Res Block to reduce the number of parameters, and cooperate with the spatial information extraction network above to strengthen the information extraction ability. On the basis of CASP-GAN, an attentional generative cross-modality segmentation (AGCMS) method is further proposed. This method inputs the modalities generated by CASP-GAN and the real modalities into the segmentation network for brain tumor segmentation. Experimental results show that CASP-GAN outperforms CycleGAN and some state-of-the-art methods in PSNR, SSMI and RMSE in most tasks.
updated: Tue Oct 10 2023 10:53:29 GMT+0000 (UTC)
published: Mon Apr 17 2023 08:34:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト