深層学習に基づく医療画像のセグメンテーションは、別のドメインの画像に展開すると失敗することがよくあります。ドメイン適応方法はドメインシフトの課題を解決することを目的としていますが、依然としていくつかの問題に直面しています。転移学習法ではターゲット ドメインのアノテーションが必要ですが、生成型教師なしドメイン適応 (UDA) モデルはドメイン固有の表現を無視します。その生成された品質によってセグメンテーションのパフォーマンスが大幅に制限されます。この研究では、識別パラダイムに基づいた新しい構造モード制約 (SMC) UDA フレームワークを提案し、ドメイン間のブリッジとしてエッジ構造を導入します。提案されたマルチモーダル学習バックボーンは、画像テクスチャから構造情報を抽出して、ドメイン不変のエッジ構造を区別します。構造に制約された自己学習と漸進的な ROI を使用して、私たちの方法はエッジの 3D 空間構造を特定することによって腎臓をセグメント化します。我々は、ラベル付きソースドメイン(CT)からラベルなしターゲットドメイン(CT/MRI)に適応させて、公共の腎セグメンテーションデータセットでSMC-UDAを評価しました。実験は、私たちが提案した SMC-UDA が強力な一般化を持ち、生成 UDA 手法よりも優れていることを示しています。
Medical image segmentation based on deep learning often fails when deployed on images from a different domain. The domain adaptation methods aim to solve domain-shift challenges, but still face some problems. The transfer learning methods require annotation on the target domain, and the generative unsupervised domain adaptation (UDA) models ignore domain-specific representations, whose generated quality highly restricts segmentation performance. In this study, we propose a novel Structure-Modal Constrained (SMC) UDA framework based on a discriminative paradigm and introduce edge structure as a bridge between domains. The proposed multi-modal learning backbone distills structure information from image texture to distinguish domain-invariant edge structure. With the structure-constrained self-learning and progressive ROI, our methods segment the kidney by locating the 3D spatial structure of the edge. We evaluated SMC-UDA on public renal segmentation datasets, adapting from the labeled source domain (CT) to the unlabeled target domain (CT/MRI). The experiments show that our proposed SMC-UDA has a strong generalization and outperforms generative UDA methods.