arXiv reaDer
劣化適応を伴う 3D MRI 超解像のための教師なし表現学習
Unsupervised Representation Learning for 3D MRI Super Resolution with Degradation Adaptation
高解像度 (HR) 磁気共鳴画像法は、医師の診断と画像誘導治療を支援する上で重要です。ただし、HR 画像の取得には時間と費用がかかる場合があります。その結果、深層学習ベースの超解像再構成 (SRR) が、低解像度 (LR) 画像から超解像 (SR) 画像を生成するための有望なソリューションとして浮上しています。残念ながら、このようなニューラル ネットワークのトレーニングには、整列された本物の HR 画像と LR 画像のペアが必要ですが、画像取得中および画像取得間の患者の動きのために取得するのは困難です。硬組織の硬直した動きは画像レジストレーションで修正できますが、変形した軟組織の位置合わせは複雑であるため、本物の HR 画像と LR 画像のペアを使用してニューラル ネットワークをトレーニングすることは現実的ではありません。以前の研究では、本物の HR 画像とダウンサンプリングされた合成 LR 画像を使用した SRR に焦点を当ててきました。ただし、合成 LR 画像と本物の LR 画像の劣化表現の違いにより、本物の LR 画像から再構成された SR 画像の品質が低下します。この問題に対処するために、新しい教師なし劣化適応ネットワーク (UDEAN) を提案します。私たちのネットワークは、劣化学習ネットワークと SRR ネットワークで構成されています。劣化学習ネットワークは、整列していない、または対になっていない LR 画像から学習した劣化表現を使用して、HR 画像をダウンサンプリングします。次に、SRR ネットワークは、ダウンサンプリングされた HR 画像から元の画像へのマッピングを学習します。実験結果は、私たちの方法が最先端のネットワークよりも優れており、臨床現場の課題に対する有望な解決策であることを示しています。
High-resolution (HR) magnetic resonance imaging is critical in aiding doctors in their diagnoses and image-guided treatments. However, acquiring HR images can be time-consuming and costly. Consequently, deep learning-based super-resolution reconstruction (SRR) has emerged as a promising solution for generating super-resolution (SR) images from low-resolution (LR) images. Unfortunately, training such neural networks requires aligned authentic HR and LR image pairs, which are challenging to obtain due to patient movements during and between image acquisitions. While rigid movements of hard tissues can be corrected with image registration, aligning deformed soft tissues is complex, making it impractical to train neural networks with authentic HR and LR image pairs. Previous studies have focused on SRR using authentic HR images and down-sampled synthetic LR images. However, the difference in degradation representations between synthetic and authentic LR images suppresses the quality of SR images reconstructed from authentic LR images. To address this issue, we propose a novel Unsupervised Degradation Adaptation Network (UDEAN). Our network consists of a degradation learning network and an SRR network. The degradation learning network downsamples the HR images using the degradation representation learned from the misaligned or unpaired LR images. The SRR network then learns the mapping from the down-sampled HR images to the original ones. Experimental results show that our method outperforms state-of-the-art networks and is a promising solution to the challenges in clinical settings.
updated: Wed Apr 24 2024 21:13:11 GMT+0000 (UTC)
published: Fri May 13 2022 21:07:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト