arXiv reaDer
高速MRI用のSwinTransformer
Swin Transformer for Fast MRI
磁気共鳴画像法(MRI)は、高解像度で再現性のある画像を生成できる重要な非侵襲的臨床ツールです。しかし、高品質のMR画像には長いスキャン時間が必要であり、患者の倦怠感や不快感を引き起こし、患者の自発的な動きや不随意の生理的動きによるアーチファクトが増加します。スキャンプロセスを加速するために、k空間アンダーサンプリングと深層学習ベースの再構成による方法が普及しています。この作業では、高速MRI再構成のための新しいSwinトランスフォーマーベースの方法であるSwinMRを紹介しました。ネットワーク全体は、入力モジュール(IM)、特徴抽出モジュール(FEM)、および出力モジュール(OM)で構成されていました。 IMとOMは2D畳み込み層であり、FEMは残りのSwinトランスフォーマーブロック(RSTB)と2D畳み込み層のカスケードで構成されていました。 RSTBは、一連のSwinトランスフォーマーレイヤー(STL)で構成されていました。 STLのシフトウィンドウマルチヘッド自己注意(W-MSA / SW-MSA)は、画像空間全体の元の変圧器のマルチヘッド自己注意(MSA)ではなく、シフトウィンドウで実行されました。より多くのテクスチャと詳細を予約することが証明された感度マップを使用して、新しいマルチチャネル損失が提案されました。カルガリー-カンピナスの公共脳MRデータセットで一連の比較研究とアブレーション研究を実施し、マルチモーダル脳腫瘍セグメンテーションチャレンジ2017データセットでダウンストリームセグメンテーション実験を実施しました。結果は、SwinMRが他のベンチマーク手法と比較して高品質の再構成を達成したことを示しており、さまざまなアンダーサンプリングマスク、ノイズの中断、さまざまなデータセットで優れた堅牢性を示しています。コードはhttps://github.com/ayanglab/SwinMRで公開されています。
Magnetic resonance imaging (MRI) is an important non-invasive clinical tool that can produce high-resolution and reproducible images. However, a long scanning time is required for high-quality MR images, which leads to exhaustion and discomfort of patients, inducing more artefacts due to voluntary movements of the patients and involuntary physiological movements. To accelerate the scanning process, methods by k-space undersampling and deep learning based reconstruction have been popularised. This work introduced SwinMR, a novel Swin transformer based method for fast MRI reconstruction. The whole network consisted of an input module (IM), a feature extraction module (FEM) and an output module (OM). The IM and OM were 2D convolutional layers and the FEM was composed of a cascaded of residual Swin transformer blocks (RSTBs) and 2D convolutional layers. The RSTB consisted of a series of Swin transformer layers (STLs). The shifted windows multi-head self-attention (W-MSA/SW-MSA) of STL was performed in shifted windows rather than the multi-head self-attention (MSA) of the original transformer in the whole image space. A novel multi-channel loss was proposed by using the sensitivity maps, which was proved to reserve more textures and details. We performed a series of comparative studies and ablation studies in the Calgary-Campinas public brain MR dataset and conducted a downstream segmentation experiment in the Multi-modal Brain Tumour Segmentation Challenge 2017 dataset. The results demonstrate our SwinMR achieved high-quality reconstruction compared with other benchmark methods, and it shows great robustness with different undersampling masks, under noise interruption and on different datasets. The code is publicly available at https://github.com/ayanglab/SwinMR.
updated: Mon Jan 10 2022 09:32:32 GMT+0000 (UTC)
published: Mon Jan 10 2022 09:32:32 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト