arXiv reaDer
共同MRI再構成と超解像のためのタスクトランスフォーマーネットワーク
Task Transformer Network for Joint MRI Reconstruction and Super-Resolution
磁気共鳴画像法(MRI)の中心的な問題は、加速と画質の間のトレードオフです。画像の再構成と超解像は、磁気共鳴画像法(MRI)の2つの重要な手法です。現在のメソッドは、これらのタスク間の相関関係を無視して、これらのタスクを個別に実行するように設計されています。この作業では、共同MRI再構成と超解像のためのエンドツーエンドタスクトランスフォーマーネットワーク(T ^ 2Net)を提案します。これにより、表現と特徴の送信を複数のタスク間で共有して、より高品質で超解像を実現できます。高度にアンダーサンプリングされ、縮退したMRIデータからのモーションアーティファクトのない画像。私たちのフレームワークは、再構築と超解像の両方を組み合わせ、2つのサブブランチに分割され、その機能はクエリとキーとして表現されます。具体的には、2つのタスク間の共同特徴学習を推奨し、それによって正確なタスク情報を転送します。まず、2つの別々のCNNブランチを使用して、タスク固有の機能を抽出します。次に、タスクトランスフォーマーモジュールは、2つのタスク間の関連性を埋め込んで合成するように設計されています。実験結果は、私たちのマルチタスクモデルが定量的および定性的に高度なシーケンシャルメソッドを大幅に上回っていることを示しています。
The core problem of Magnetic Resonance Imaging (MRI) is the trade off between acceleration and image quality. Image reconstruction and super-resolution are two crucial techniques in Magnetic Resonance Imaging (MRI). Current methods are designed to perform these tasks separately, ignoring the correlations between them. In this work, we propose an end-to-end task transformer network (T^2Net) for joint MRI reconstruction and super-resolution, which allows representations and feature transmission to be shared between multiple task to achieve higher-quality, super-resolved and motion-artifacts-free images from highly undersampled and degenerated MRI data. Our framework combines both reconstruction and super-resolution, divided into two sub-branches, whose features are expressed as queries and keys. Specifically, we encourage joint feature learning between the two tasks, thereby transferring accurate task information. We first use two separate CNN branches to extract task-specific features. Then, a task transformer module is designed to embed and synthesize the relevance between the two tasks. Experimental results show that our multi-task model significantly outperforms advanced sequential methods, both quantitatively and qualitatively.
updated: Wed Dec 15 2021 18:27:48 GMT+0000 (UTC)
published: Sat Jun 12 2021 10:59:46 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト