arXiv reaDer
サイクル類似性注意を用いた数ショット医用画像セグメンテーション
Few-shot Medical Image Segmentation with Cycle-resemblance Attention
最近、医用画像アプリケーションの要件の増加と、医用画像に注釈を付ける専門的な要件により、医用画像のセマンティック セグメンテーション分野で少数ショット学習が注目を集めています。限られた数のラベル付き医用画像でセグメンテーションを実行するために、ほとんどの既存の研究はプロトタイプ ネットワーク (PN) を使用し、説得力のある成功を収めています。ただし、これらのアプローチは、提案された表現ネットワークから抽出されたクエリ画像の特徴を見落とし、クエリ画像とサポート画像の間の空間的接続を維持できません。このホワイト ペーパーでは、新しい自己教師付き少数ショット医療画像セグメンテーション ネットワークを提案し、クエリとサポート医療画像の間のピクセル単位の関係を完全に活用するための新しい Cycle-Resemblance Attention (CRA) モジュールを導入します。特に、より豊富な関係情報を絞り込むために、最初に複数の注意ブロックを並べます。次に、CRA モジュールを従来のプロトタイプ ネットワークと統合して CRAPNet を提示します。このネットワークでは、クエリとサポート機能の間のピクセル単位の関係がセグメンテーションのために十分に再取得されます。腹部 MRI と腹部 CT などの 2 つの異なる医用画像データセットに関する広範な実験は、既存の最先端の方法に対するモデルの優位性を示しています。
Recently, due to the increasing requirements of medical imaging applications and the professional requirements of annotating medical images, few-shot learning has gained increasing attention in the medical image semantic segmentation field. To perform segmentation with limited number of labeled medical images, most existing studies use Proto-typical Networks (PN) and have obtained compelling success. However, these approaches overlook the query image features extracted from the proposed representation network, failing to preserving the spatial connection between query and support images. In this paper, we propose a novel self-supervised few-shot medical image segmentation network and introduce a novel Cycle-Resemblance Attention (CRA) module to fully leverage the pixel-wise relation between query and support medical images. Notably, we first line up multiple attention blocks to refine more abundant relation information. Then, we present CRAPNet by integrating the CRA module with a classic prototype network, where pixel-wise relations between query and support features are well recaptured for segmentation. Extensive experiments on two different medical image datasets, e.g., abdomen MRI and abdomen CT, demonstrate the superiority of our model over existing state-of-the-art methods.
updated: Wed Dec 07 2022 21:55:26 GMT+0000 (UTC)
published: Wed Dec 07 2022 21:55:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト