arXiv reaDer
End-to-end Ultrasound Frame to Volume Registration
術中の2D経直腸的超音波(TRUS)画像と術前の3D磁気共鳴(MR)ボリュームを融合して、前立腺生検をガイドすることで、収量を大幅に増やすことができます。ただし、このようなマルチモーダル2D / 3D登録の問題は、非常に困難な作業です。本論文では、ハードウェア追跡を必要とせずに2DTRUSフレームを3DTRUSボリュームに位置合わせすることにより、以前の研究ギャップを効率的に埋めることができるエンドツーエンドのフレームからボリュームへの登録ネットワーク(FVR-Net)を提案します。提案されたFVR-Netは、デュアルブランチ特徴抽出モジュールを利用してTRUSフレームとボリュームから情報を抽出し、変換パラメータを推定します。また、コンテンツ対応学習のために教師なし画像類似性損失から勾配を逆伝播できるようにする微分可能な2Dスライスサンプリングモジュールを紹介します。私たちのモデルは、非常に競争力のある登録精度でリアルタイムの介入ガイダンスの優れた効率を示しています。
Fusing intra-operative 2D transrectal ultrasound (TRUS) image with pre-operative 3D magnetic resonance (MR) volume to guide prostate biopsy can significantly increase the yield. However, such a multimodal 2D/3D registration problem is a very challenging task. In this paper, we propose an end-to-end frame-to-volume registration network (FVR-Net), which can efficiently bridge the previous research gaps by aligning a 2D TRUS frame with a 3D TRUS volume without requiring hardware tracking. The proposed FVR-Net utilizes a dual-branch feature extraction module to extract the information from TRUS frame and volume to estimate transformation parameters. We also introduce a differentiable 2D slice sampling module which allows gradients backpropagating from an unsupervised image similarity loss for content correspondence learning. Our model shows superior efficiency for real-time interventional guidance with highly competitive registration accuracy.
updated: Wed Jul 14 2021 01:59:42 GMT+0000 (UTC)
published: Wed Jul 14 2021 01:59:42 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト