クロスコントラスト画像の変換は、臨床診断で欠落しているコントラストを完成させるための重要なタスクです。ただし、ほとんどの既存の方法では、コントラストのペアごとに個別のトランスレータを学習します。これは、実際のシナリオで考えられるコントラストのペアが多いため、非効率的です。この作業では、異なるコントラストペア間で効果的かつ効率的に変換するための統合Hyper-GANモデルを提案します。 Hyper-GANは、ハイパーエンコーダーとハイパーデコーダーのペアで構成され、最初にソースコントラストから共通の特徴空間にマッピングされ、次にターゲットコントラスト画像にマッピングされます。異なるコントラストペア間の変換を容易にするために、コントラスト変調器は、異なるコントラストに適応するハイパーエンコーダーとハイパーデコーダーを調整するように設計されています。また、対象のマルチコントラスト画像が共通の特徴空間を共有し、共有された基礎となる解剖学的構造を暗黙的にモデル化するように、共通の空間損失を設計します。 IXIとBraTS2019の2つのデータセットでの実験では、Hyper-GANが精度と効率の両方で最先端の結果を達成していることが示されています。たとえば、半分未満の量の2つのデータセットでPSNRが1.47dBと1.09dB以上向上しています。パラメータの。
Cross-contrast image translation is an important task for completing missing contrasts in clinical diagnosis. However, most existing methods learn separate translator for each pair of contrasts, which is inefficient due to many possible contrast pairs in real scenarios. In this work, we propose a unified Hyper-GAN model for effectively and efficiently translating between different contrast pairs. Hyper-GAN consists of a pair of hyper-encoder and hyper-decoder to first map from the source contrast to a common feature space, and then further map to the target contrast image. To facilitate the translation between different contrast pairs, contrast-modulators are designed to tune the hyper-encoder and hyper-decoder adaptive to different contrasts. We also design a common space loss to enforce that multi-contrast images of a subject share a common feature space, implicitly modeling the shared underlying anatomical structures. Experiments on two datasets of IXI and BraTS 2019 show that our Hyper-GAN achieves state-of-the-art results in both accuracy and efficiency, e.g., improving more than 1.47 and 1.09 dB in PSNR on two datasets with less than half the amount of parameters.