arXiv reaDer
エッジマップを使用したマルチモーダル教師なし脳画像レジストレーション
Multi-modal unsupervised brain image registration using edge maps
微分同相変形可能なマルチモーダル画像レジストレーションは、異なるモダリティによって取得された画像を同じ座標空間に持ち込むと同時に、トポロジーと変換の可逆性を維持することを目的とした挑戦的なタスクです。最近の研究では、従来の反復登録方法よりも計算効率が高く、競争力のある登録精度を達成することが示されているため、このタスクにディープラーニングアプローチを活用することに焦点が当てられています。この作業では、トレーニング中に画像の勾配の大きさ、つまり画像のエッジから得られる補助情報から利益を得る、シンプルでありながら効果的な教師なし深層学習ベースのマルチモーダル画像レジストレーションアプローチを提案します。この背後にある直感は、強い勾配のある画像の場所は、組織の遷移を示すと想定されているということです。組織の遷移は、ジオメトリの制約として機能できる情報価値の高い場所です。このタスクは、セグメンテーションマップを使用してトレーニングを推進するのと似ていますが、エッジマップは取得がより簡単で高速であり、注釈は必要ありません。マルチモーダル登録を支援すると言われている3つの異なる損失関数を使用して、さまざまな被験者のマルチモーダル(T1wからT2w)磁気共鳴(MR)脳画像を登録するというコンテキストでアプローチを評価し、すべての場合に補助情報を示しますランタイムを損なうことなく、より良い結果につながります。
Diffeomorphic deformable multi-modal image registration is a challenging task which aims to bring images acquired by different modalities to the same coordinate space and at the same time to preserve the topology and the invertibility of the transformation. Recent research has focused on leveraging deep learning approaches for this task as these have been shown to achieve competitive registration accuracy while being computationally more efficient than traditional iterative registration methods. In this work, we propose a simple yet effective unsupervised deep learning-based multi-modal image registration approach that benefits from auxiliary information coming from the gradient magnitude of the image, i.e. the image edges, during the training. The intuition behind this is that image locations with a strong gradient are assumed to denote a transition of tissues, which are locations of high information value able to act as a geometry constraint. The task is similar to using segmentation maps to drive the training, but the edge maps are easier and faster to acquire and do not require annotations. We evaluate our approach in the context of registering multi-modal (T1w to T2w) magnetic resonance (MR) brain images of different subjects using three different loss functions that are said to assist multi-modal registration, showing that in all cases the auxiliary information leads to better results without compromising the runtime.
updated: Tue Mar 15 2022 10:23:15 GMT+0000 (UTC)
published: Wed Feb 09 2022 15:50:14 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト