MLP-SRGAN と呼ばれる新しいアーキテクチャを提案します。これは、マルチレイヤー パーセプトロン ミキサー (MLP-ミキサー) と畳み込みレイヤーを利用してスライス方向にアップサンプリングする単次元の超解像度生成的敵対的ネットワーク (SRGAN) です。 MLP-SRGAN は、MSSEG2 チャレンジ データセットの高解像度 (HR) FLAIR MRI を使用してトレーニングおよび検証されています。このメソッドは、スライス次元の空間解像度が低い画像の 3 つの多施設 FLAIR データセット (CAIN、ADNI、CCNA) に適用され、保留 (目に見えない) 臨床データのパフォーマンスを調べました。アップサンプリングされた結果は、いくつかの最先端の SR ネットワークと比較されます。高解像度 (HR) のグラウンド トゥルースを含む画像の場合、ピーク信号対雑音比 (PSNR) と構造類似性指数 (SSIM) を使用して、アップサンプリング パフォーマンスを測定します。グラウンド トゥルースがない場合のシャープネス (エッジ強度)、ノイズ (エントロピー)、およびぼやけ (低周波情報) を定量化するために、いくつかの新しい構造的で参照のない画質メトリックが提案されました。結果は、MLP-SRGAN が既存の方法よりもエッジがシャープになり、ぼやけが少なくなり、より多くのテクスチャと細かい解剖学的詳細が保持され、パラメータが少なくなり、トレーニング/評価時間が短縮され、モデル サイズが小さくなることが示されました。 MLP-SRGAN のトレーニングと推論、データ ジェネレーター、モデル、および参照なしの画質メトリクスのコードは、https://github.com/IAMLAB-Ryerson/MLP-SRGAN で入手できます。
We propose a novel architecture called MLP-SRGAN, which is a single-dimension Super Resolution Generative Adversarial Network (SRGAN) that utilizes Multi-Layer Perceptron Mixers (MLP-Mixers) along with convolutional layers to upsample in the slice direction. MLP-SRGAN is trained and validated using high resolution (HR) FLAIR MRI from the MSSEG2 challenge dataset. The method was applied to three multicentre FLAIR datasets (CAIN, ADNI, CCNA) of images with low spatial resolution in the slice dimension to examine performance on held-out (unseen) clinical data. Upsampled results are compared to several state-of-the-art SR networks. For images with high resolution (HR) ground truths, peak-signal-to-noise-ratio (PSNR) and structural similarity index (SSIM) are used to measure upsampling performance. Several new structural, no-reference image quality metrics were proposed to quantify sharpness (edge strength), noise (entropy), and blurriness (low frequency information) in the absence of ground truths. Results show MLP-SRGAN results in sharper edges, less blurring, preserves more texture and fine-anatomical detail, with fewer parameters, faster training/evaluation time, and smaller model size than existing methods. Code for MLP-SRGAN training and inference, data generators, models and no-reference image quality metrics will be available at https://github.com/IAMLAB-Ryerson/MLP-SRGAN.