arXiv reaDer
マルチステージ統合ネットワークを介したマルチコントラストMRI超解像
Multi-Contrast MRI Super-Resolution via a Multi-Stage Integration Network
超解像(SR)は、磁気共鳴画像法(MRI)の画質を向上させる上で重要な役割を果たします。 MRIはマルチコントラスト画像を生成し、軟組織の鮮明な表示を提供できます。ただし、現在の超解像法では、単一のコントラストのみを使用するか、単純なマルチコントラスト融合メカニズムを使用して、SRの改善に役立つさまざまなコントラスト間の豊富な関係を無視します。この作業では、マルチコントラストMRI SR用のマルチステージ統合ネットワーク(つまり、MINet)を提案します。これは、異なるステージでのマルチコントラスト画像間の依存関係を明示的にモデル化して、画像SRをガイドします。特に、MINetは最初に、異なるコントラストの画像ごとに複数の畳み込みステージから階層的特徴表現を学習します。続いて、マルチコントラスト画像の表現間の包括的な関係をマイニングするためのマルチステージ統合モジュールを紹介します。具体的には、モジュールは各表現を他のすべての機能と照合します。これらの機能は、類似性の観点から統合されて、充実した表現を取得します。 fastMRIと実際の臨床データセットに関する広範な実験は、1)MINetがさまざまなメトリックの点で最先端のマルチコントラストSRメソッドよりも優れていること、および2)マルチステージ統合モジュールが間の複雑な相互作用を発掘できることを示しています。さまざまな段階でのマルチコントラスト機能により、ターゲット画像の品質が向上します。
Super-resolution (SR) plays a crucial role in improving the image quality of magnetic resonance imaging (MRI). MRI produces multi-contrast images and can provide a clear display of soft tissues. However, current super-resolution methods only employ a single contrast, or use a simple multi-contrast fusion mechanism, ignoring the rich relations among different contrasts, which are valuable for improving SR. In this work, we propose a multi-stage integration network (i.e., MINet) for multi-contrast MRI SR, which explicitly models the dependencies between multi-contrast images at different stages to guide image SR. In particular, our MINet first learns a hierarchical feature representation from multiple convolutional stages for each of different-contrast image. Subsequently, we introduce a multi-stage integration module to mine the comprehensive relations between the representations of the multi-contrast images. Specifically, the module matches each representation with all other features, which are integrated in terms of their similarities to obtain an enriched representation. Extensive experiments on fastMRI and real-world clinical datasets demonstrate that 1) our MINet outperforms state-of-the-art multi-contrast SR methods in terms of various metrics and 2) our multi-stage integration module is able to excavate complex interactions among multi-contrast features at different stages, leading to improved target-image quality.
updated: Wed May 19 2021 06:47:31 GMT+0000 (UTC)
published: Wed May 19 2021 06:47:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト