arXiv reaDer
MRI 再構成のための動的 MLP
Dynamic MLP for MRI Reconstruction
畳み込みニューラル ネットワーク (CNN) が高速磁気共鳴画像法 (MRI) の最も成功した再構成技術になるにつれて、CNN は画質、特にシャープネスにおいて限界に達します。画質をさらに改善するには、膨大な計算コストがかかることが多く、診療所での実用性が妨げられます。 MRI 再構成は本質的にデコンボリューション問題であり、小さな畳み込みカーネルを使用した CNN では取得が困難な長距離情報を必要とします。多層パーセプトロン (MLP) は、このような長距離情報をモデル化できますが、クリニック設定では柔軟な解像度での画像の再構成が必要な間、固定の入力サイズに制限されます。この論文では、任意の画像サイズを受け入れる動的 MLP (dMLP) を特徴とするハイブリッド CNN と MLP 再構成戦略を提案しました。実験は、3D マルチコイル MRI を使用して行われました。私たちの結果は、提案された dMLP が純粋な CNN の対応物と比較して画像のシャープネスを改善できる一方で、GPU メモリと計算時間をわずかに追加することを示唆しています。さらに、提案された dMLP を大きなカーネルを使用した CNN と比較し、1D dMLP のスタックを使用した純粋な MLP ベースの再構成と、1D 畳み込みのみを使用した CNN の対応物を調査しました。拡大された受容野が画質を著しく改善することを観察しましたが、大きなカーネルで CNN を使用するだけではトレーニングが困難になります。注目すべきことに、純粋な MLP ベースの方法は、CNN が関与する方法よりも優れており、自然画像に対する他のコンピューター ビジョン タスクでの観察結果と一致しています。
As convolutional neural networks (CNN) become the most successful reconstruction technique for accelerated Magnetic Resonance Imaging (MRI), CNN reaches its limit on image quality especially in sharpness. Further improvement on image quality often comes at massive computational costs, hindering their practicability in the clinic setting. MRI reconstruction is essentially a deconvolution problem, which demands long-distance information that is difficult to be captured by CNNs with small convolution kernels. The multi-layer perceptron (MLP) is able to model such long-distance information, but it restricts a fixed input size while the reconstruction of images in flexible resolutions is required in the clinic setting. In this paper, we proposed a hybrid CNN and MLP reconstruction strategy, featured by dynamic MLP (dMLP) that accepts arbitrary image sizes. Experiments were conducted using 3D multi-coil MRI. Our results suggested the proposed dMLP can improve image sharpness compared to its pure CNN counterpart, while costing minor additional GPU memory and computation time. We further compared the proposed dMLP with CNNs using large kernels and studied pure MLP-based reconstruction using a stack of 1D dMLPs, as well as its CNN counterpart using only 1D convolutions. We observed the enlarged receptive field has noticeably improved image quality, while simply using CNN with a large kernel leads to difficulties in training. Noticeably, the pure MLP-based method has been outperformed by CNN-involved methods, which matches the observations in other computer vision tasks for natural images.
updated: Sat Jan 21 2023 02:58:51 GMT+0000 (UTC)
published: Sat Jan 21 2023 02:58:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト