arXiv reaDer
4D動的医用画像のための教師なしランドマーク検出ベースの時空間運動推定
Unsupervised Landmark Detection Based Spatiotemporal Motion Estimation for 4D Dynamic Medical Images
動きの推定は、標的臓器の解剖学的構造と機能を評価するための動的医用画像処理の基本的なステップです。ただし、ローカル画像の類似性を評価することによってモーションフィールドを最適化する既存の画像ベースのモーション推定方法は、特に大きなモーションが存在する場合に、信じがたい推定を生成する傾向があります。この研究では、2つの段階で構成されるDense-Sparse-Dense(DSD)の新しいモーション推定フレームワークを提供します。最初の段階では、生の密な画像を処理して、ターゲット臓器の解剖学的トポロジーを表す疎なランドマークを抽出し、動きの推定に不要な冗長な情報を破棄します。この目的のために、教師なし3Dランドマーク検出ネットワークを導入して、ターゲット臓器の動きを推定するために、空間的にまばらであるが代表的なランドマークを抽出します。第2段階では、異なる時点の2つの画像の抽出されたスパースランドマークからスパースモーション変位を導出します。次に、スパースランドマーク変位を高密度画像ドメインに投影してモーションフィールドを構築するモーション再構成ネットワークを提示します。さらに、2段階のDSDフレームワークから推定されたモーションフィールドを初期化として使用し、軽量でありながら効果的な反復最適化でモーション推定の品質を向上させます。心臓の動きと肺の呼吸の動きをそれぞれモデル化するために、2つの動的医療イメージングタスクでメソッドを評価します。私たちの方法は、既存の比較方法と比較して優れた運動推定精度を生み出しました。さらに、広範な実験結果は、私たちのソリューションが手動の注釈を必要とせずに、よく代表的な解剖学的ランドマークを抽出できることを示しています。私たちのコードはオンラインで公開されています。
Motion estimation is a fundamental step in dynamic medical image processing for the assessment of target organ anatomy and function. However, existing image-based motion estimation methods, which optimize the motion field by evaluating the local image similarity, are prone to produce implausible estimation, especially in the presence of large motion. In this study, we provide a novel motion estimation framework of Dense-Sparse-Dense (DSD), which comprises two stages. In the first stage, we process the raw dense image to extract sparse landmarks to represent the target organ anatomical topology and discard the redundant information that is unnecessary for motion estimation. For this purpose, we introduce an unsupervised 3D landmark detection network to extract spatially sparse but representative landmarks for the target organ motion estimation. In the second stage, we derive the sparse motion displacement from the extracted sparse landmarks of two images of different time points. Then, we present a motion reconstruction network to construct the motion field by projecting the sparse landmarks displacement back into the dense image domain. Furthermore, we employ the estimated motion field from our two-stage DSD framework as initialization and boost the motion estimation quality in light-weight yet effective iterative optimization. We evaluate our method on two dynamic medical imaging tasks to model cardiac motion and lung respiratory motion, respectively. Our method has produced superior motion estimation accuracy compared to existing comparative methods. Besides, the extensive experimental results demonstrate that our solution can extract well representative anatomical landmarks without any requirement of manual annotation. Our code is publicly available online.
updated: Tue Oct 12 2021 10:32:08 GMT+0000 (UTC)
published: Thu Sep 30 2021 02:06:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト