arXiv reaDer
劣化適応を伴う3DMRI超解像のための教師なし表現学習
Unsupervised Representation Learning for 3D MRI Super Resolution with Degradation Adaptation
高解像度(HR)MRIは、医師の診断と画像誘導治療を支援する上で重要ですが、取得時間が長いため、臨床現場では取得が困難です。そのため、研究コミュニティは、取得時間を短縮してHR MRI画像を再構成するために、深層学習ベースの超解像(SR)技術を調査しました。ただし、このようなニューラルネットワークのトレーニングには、通常、HRと低解像度(LR)の生体内画像のペアが必要です。これらの画像は、画像取得中および取得間の患者の動きのために取得が困難です。硬組織の硬い動きは画像レジストレーションで修正できますが、変形した軟組織の位置合わせは困難であり、このような本物のHRおよびLR画像ペアを使用してニューラルネットワークをトレーニングすることは実用的ではありません。したがって、これまでの研究のほとんどは、本物のHR画像とHR画像からダウンサンプリングされた合成LR画像を使用することによるSR再構成を提案しましたが、合成LR画像と本物LR画像の劣化表現の違いにより、本物のLR画像からのSR再構成のパフォーマンスが抑制されます。前述の問題を軽減するために、新しい教師なし劣化適応ネットワーク(UDEAN)を提案します。私たちのモデルは、劣化学習ネットワークとSR再構築ネットワークの2つのコンポーネントで構成されています。劣化学習ネットワークは、不整合または対になっていないLR画像の劣化表現に対処することによってHR画像をダウンサンプリングし、SR再構成ネットワークはダウンサンプリングされたHR画像から元のHR画像へのマッピングを学習します。その結果、SR再構成ネットワークはLR画像からSR画像を生成し、HR画像と同等の品質を実現できます。実験結果は、私たちの方法が最先端のモデルよりも優れており、実際の臨床現場に適用できる可能性があることを示しています。
High-resolution (HR) MRI is critical in assisting the doctor's diagnosis and image-guided treatment, but is hard to obtain in a clinical setting due to long acquisition time. Therefore, the research community investigated deep learning-based super-resolution (SR) technology to reconstruct HR MRI images with shortened acquisition time. However, training such neural networks usually requires paired HR and low-resolution (LR) in-vivo images, which are difficult to acquire due to patient movement during and between the image acquisition. Rigid movements of hard tissues can be corrected with image-registration, whereas the alignment of deformed soft tissues is challenging, making it impractical to train the neural network with such authentic HR and LR image pairs. Therefore, most of the previous studies proposed SR reconstruction by employing authentic HR images and synthetic LR images downsampled from the HR images, yet the difference in degradation representations between synthetic and authentic LR images suppresses the performance of SR reconstruction from authentic LR images. To mitigate the aforementioned problems, we propose a novel Unsupervised DEgradation Adaptation Network (UDEAN). Our model consists of two components: the degradation learning network and the SR reconstruction network. The degradation learning network downsamples the HR images by addressing the degradation representation of the misaligned or unpaired LR images, and the SR reconstruction network learns the mapping from the downsampled HR images to their original HR images. As a result, the SR reconstruction network can generate SR images from the LR images and achieve comparable quality to the HR images. Experimental results show that our method outperforms the state-of-the-art models and can potentially be applied in real-world clinical settings.
updated: Fri May 13 2022 21:07:26 GMT+0000 (UTC)
published: Fri May 13 2022 21:07:26 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト