磁気共鳴画像法(MRI)は通常、複数のシーケンス(ここでは「モダリティ」と定義)を採用します。各モダリティは、異なる解剖学的および機能的な臨床情報を提供するように設計されているため、モダリティ間で画像コンテンツに明らかな違いがあります。モダリティ間およびモダリティ内のアフィンおよび非剛体画像レジストレーションは、たとえばイメージングバイオマーカーを導出し、さまざまなMRIモダリティ、時相、スライスにわたって臨床的に評価する必要がある前など、臨床イメージングにおける重要な医用画像分析プロセスです。実際の臨床シナリオでは一般的に必要ですが、アフィンおよび非剛体の画像レジストレーションは、単一の教師なしモデルアーキテクチャを使用して広範囲に調査されていません。私たちの仕事では、アフィン変換と非剛体変換を同時に正確にモデル化できる、教師なし深層学習登録方法論を提示します。さらに、逆整合性は、深層学習登録アルゴリズムでは考慮されない基本的なモダリティ間登録プロパティです。逆一貫性に対処するために、私たちの方法論は、双方向のクロスモダリティ画像合成を実行してモダリティ不変の潜在的表現を学習し、2つの因数分解された変換ネットワークと逆一貫性損失を使用してトポロジー保存解剖学的変換を学習します。全体として、私たちのモデル(「FIRE」という名前)は、マルチモダリティ脳2Dおよび3DMRIおよびモダリティ内心臓4DMRIデータ実験での参照標準ベースライン法に対して改善されたパフォーマンスを示しています。
Magnetic Resonance Imaging (MRI) typically recruits multiple sequences (defined here as "modalities"). As each modality is designed to offer different anatomical and functional clinical information, there are evident disparities in the imaging content across modalities. Inter- and intra-modality affine and non-rigid image registration is an essential medical image analysis process in clinical imaging, as for example before imaging biomarkers need to be derived and clinically evaluated across different MRI modalities, time phases and slices. Although commonly needed in real clinical scenarios, affine and non-rigid image registration is not extensively investigated using a single unsupervised model architecture. In our work, we present an un-supervised deep learning registration methodology which can accurately model affine and non-rigid trans-formations, simultaneously. Moreover, inverse-consistency is a fundamental inter-modality registration property that is not considered in deep learning registration algorithms. To address inverse-consistency, our methodology performs bi-directional cross-modality image synthesis to learn modality-invariant latent rep-resentations, while involves two factorised transformation networks and an inverse-consistency loss to learn topology-preserving anatomical transformations. Overall, our model (named "FIRE") shows improved performances against the reference standard baseline method on multi-modality brain 2D and 3D MRI and intra-modality cardiac 4D MRI data experiments.