arXiv reaDer
Mind The Gap: 教師なしのクロスモダリティ医療画像セグメンテーションのための局所的な不均衡の緩和
Mind The Gap: Alleviating Local Imbalance for Unsupervised Cross-Modality Medical Image Segmentation
教師なしのクロスモダリティ医用画像適応は、ターゲット ドメイン ラベルを使用せずに、異なるイメージング モダリティ間の深刻なドメイン ギャップを緩和することを目的としています。このキャンペーンの鍵は、ソース ドメインとターゲット ドメインの分布を一致させることに依存しています。一般的な試みの 1 つは、2 つのドメイン間でグローバルなアライメントを強制することですが、これは致命的なローカル不均衡ドメイン ギャップの問題を無視しています。最近では、モデル学習の効率を向上させるために、局所領域に注目して位置合わせを行う方法もあります。この操作により、コンテキストからの重要な情報が欠落する可能性があります。この制限に取り組むために、医用画像の特性を考慮してドメインギャップの不均衡を緩和する新しい戦略、つまりグローバルローカルユニオンアライメントを提案します。具体的には、機能分離スタイル転送モジュールは、最初にターゲットのようなソース コンテンツ イメージを合成して、グローバル ドメイン ギャップを縮小します。次に、ローカル フィーチャ マスクを統合して、ドメイン ギャップが大きい識別可能なフィーチャを優先することで、ローカル フィーチャの「ギャップ間」を減らします。このグローバルとローカルのアライメントの組み合わせにより、セグメンテーション ターゲットの重要な領域を正確にローカライズしながら、全体的な意味の一貫性を維持できます。 2つのクロスモダリティ適応タスクを使用して一連の実験を行います。心臓下部構造と腹部多臓器セグメンテーション。実験結果は、私たちの方法が両方のタスクで最先端のパフォーマンスを達成することを示しています。
Unsupervised cross-modality medical image adaptation aims to alleviate the severe domain gap between different imaging modalities without using the target domain label. A key in this campaign relies upon aligning the distributions of source and target domain. One common attempt is to enforce the global alignment between two domains, which, however, ignores the fatal local-imbalance domain gap problem, i.e., some local features with larger domain gap are harder to transfer. Recently, some methods conduct alignment focusing on local regions to improve the efficiency of model learning. While this operation may cause a deficiency of critical information from contexts. To tackle this limitation, we propose a novel strategy to alleviate the domain gap imbalance considering the characteristics of medical images, namely Global-Local Union Alignment. Specifically, a feature-disentanglement style-transfer module first synthesizes the target-like source-content images to reduce the global domain gap. Then, a local feature mask is integrated to reduce the 'inter-gap' for local features by prioritizing those discriminative features with larger domain gap. This combination of global and local alignment can precisely localize the crucial regions in segmentation target while preserving the overall semantic consistency. We conduct a series of experiments with two cross-modality adaptation tasks, i,e. cardiac substructure and abdominal multi-organ segmentation. Experimental results indicate that our method achieves state-of-the-art performance in both tasks.
updated: Mon Sep 05 2022 13:51:58 GMT+0000 (UTC)
published: Tue May 24 2022 08:16:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト