神経科学の最近の進歩は、特定の病状を調査し、人間の認知を理解するためのマルチモーダル医療データの有効性を浮き彫りにしました。ただし、さまざまなモダリティの完全なセットを取得することは、長い取得時間、高い検査コスト、アーチファクトの抑制など、さまざまな要因によって制限されます。さらに、ニューロイメージングデータの複雑さ、高次元性、および不均一性は、既存のランダム化スキャンを効果的に活用する上でのもう1つの重要な課題です。同じモダリティのデータは、異なるマシンによって異なる方法で測定されることが多いためです。従来の画像依存プロセスを超えて、ソース入力から解剖学的に特定のターゲットモダリティデータを合成する必要があることは明らかです。この論文では、新しいCSCℓ_4Netを使用して、モーダル内およびモーダル内の両方のバリエーションにまたがる専用機能を学習することを提案します。 CSCℓ_4Netは、機能マップ内のモーダル内データの初期統合と多変量正規適応を通じて、機能レベルの相互変換を容易にします。正定値のリーマン多様体ペナルティ付きデータ忠実度項により、CSCℓ_4Netは変換された特徴に従って欠落している測定値を再構築できます。最後に、最大化ℓ_4-ノルムは、計算効率の高い最適化問題に要約されます。広範な実験により、複数のデータセットに対する最先端の方法と比較して、CSCℓ_4Netの機能と堅牢性が検証されます。
Recent advances in neuroscience have highlighted the effectiveness of multi-modal medical data for investigating certain pathologies and understanding human cognition. However, obtaining full sets of different modalities is limited by various factors, such as long acquisition times, high examination costs and artifact suppression. In addition, the complexity, high dimensionality and heterogeneity of neuroimaging data remains another key challenge in leveraging existing randomized scans effectively, as data of the same modality is often measured differently by different machines. There is a clear need to go beyond the traditional imaging-dependent process and synthesize anatomically specific target-modality data from a source input. In this paper, we propose to learn dedicated features that cross both intre- and intra-modal variations using a novel CSCℓ_4Net. Through an initial unification of intra-modal data in the feature maps and multivariate canonical adaptation, CSCℓ_4Net facilitates feature-level mutual transformation. The positive definite Riemannian manifold-penalized data fidelity term further enables CSCℓ_4Net to reconstruct missing measurements according to transformed features. Finally, the maximization ℓ_4-norm boils down to a computationally efficient optimization problem. Extensive experiments validate the ability and robustness of our CSCℓ_4Net compared to the state-of-the-art methods on multiple datasets.