arXiv reaDer
マインドギャップ:教師なしクロスモダリティ医療画像セグメンテーションの局所的不均衡の緩和
Mind The Gap: Alleviating Local Imbalance for Unsupervised Cross-Modality Medical Image Segmentation
監視されていないクロスモダリティ医療画像適応は、ターゲットドメインラベルを使用せずに、異なるイメージングモダリティ間の深刻なドメインギャップを緩和することを目的としています。このキャンペーンの鍵は、ソースドメインとターゲットドメインの分布を調整することに依存しています。一般的な試みの1つは、2つのドメイン間のグローバルアラインメントを強制することですが、致命的なローカル不均衡ドメインギャップの問題を無視します。つまり、ドメインギャップが大きい一部のローカル機能は転送が困難です。最近、いくつかの方法は、モデル学習の効率を改善するために、局所領域に焦点を合わせて整列を行う。この操作により、コンテキストからの重要な情報が不足する可能性があります。この制限に取り組むために、医用画像の特性、すなわちグローバル-ローカルユニオンアライメントを考慮して、ドメインギャップの不均衡を緩和するための新しい戦略を提案します。具体的には、機能解きほぐしスタイル転送モジュールは、最初にターゲットのようなソースコンテンツ画像を合成して、グローバルドメインギャップを減らします。次に、ローカル機能マスクが統合され、ドメインギャップが大きい識別機能に優先順位を付けることにより、ローカル機能の「ギャップ間」を削減します。グローバルアラインメントとローカルアラインメントのこの組み合わせにより、全体的なセマンティックの一貫性を維持しながら、セグメンテーションターゲットの重要な領域を正確にローカライズできます。 2つのクロスモダリティ適応タスク、つまり、2つのクロスモダリティ適応タスクを使用して一連の実験を実行します。心臓の下部構造と腹部の多臓器セグメンテーション。実験結果は、私たちの方法がMRI-CT心臓セグメンテーションで3.92%のダイススコアと逆方向で3.33%だけSOTA方法を上回っていることを示しています。
Unsupervised cross-modality medical image adaptation aims to alleviate the severe domain gap between different imaging modalities without using the target domain label. A key in this campaign relies upon aligning the distributions of source and target domain. One common attempt is to enforce the global alignment between two domains, which, however, ignores the fatal local-imbalance domain gap problem, i.e., some local features with larger domain gap are harder to transfer. Recently, some methods conduct alignment focusing on local regions to improve the efficiency of model learning. While this operation may cause a deficiency of critical information from contexts. To tackle this limitation, we propose a novel strategy to alleviate the domain gap imbalance considering the characteristics of medical images, namely Global-Local Union Alignment. Specifically, a feature-disentanglement style-transfer module first synthesizes the target-like source-content images to reduce the global domain gap. Then, a local feature mask is integrated to reduce the 'inter-gap' for local features by prioritizing those discriminative features with larger domain gap. This combination of global and local alignment can precisely localize the crucial regions in segmentation target while preserving the overall semantic consistency. We conduct a series of experiments with two cross-modality adaptation tasks, i,e. cardiac substructure and abdominal multi-organ segmentation. Experimental results indicate that our method exceeds the SOTA methods by 3.92% Dice score in MRI-CT cardiac segmentation and 3.33% in the reverse direction.
updated: Tue May 24 2022 08:16:58 GMT+0000 (UTC)
published: Tue May 24 2022 08:16:58 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト