arXiv reaDer
コンピュータ支援整形外科手術のための閉塞ロバストな視覚的マーカーレス骨追跡
Occlusion-robust Visual Markerless Bone Tracking for Computer-Assisted Orthopaedic Surgery
従来のコンピュータ支援整形外科ナビゲーションシステムは、患者のポーズ専用の光学マーカーの追跡に依存しているため、手術のワークフローはより侵襲的で、面倒で、費用がかかります。視覚的追跡は、マーカーや手間のかからない方法でターゲットの解剖学的構造を測定するために最近提案されましたが、既存の方法は、術中の介入によって引き起こされる現実世界の閉塞の下では失敗します。さらに、そのような方法はハードウェア固有であり、外科的用途には十分に正確ではありません。本論文では、オクルージョンに対してロバストなRGB-Dセンシングベースのマーカーレス追跡法を提案した。動的な関心領域予測と堅牢な3Dポイントクラウドセグメンテーションを特徴とする新しいセグメンテーションネットワークを設計します。オクルージョンインスタンスを使用して大規模なトレーニングデータを収集するにはコストがかかるため、ネットワークトレーニング用の合成RGB-D画像を作成する新しい方法も提案します。実験結果は、特にオクルージョンが存在する場合、提案されたマーカーレス追跡方法が最近の最先端のアプローチを大幅に上回っていることを示しています。さらに、私たちの方法は、ネットワークの再トレーニングを必要とせずに、新しいカメラや死体を含む新しいターゲットモデルにうまく一般化されます。実際には、高品質の市販RGB-Dカメラを使用することにより、提案された視覚追跡方法は、モデルの膝で1〜2度および2〜4 mmの精度を達成し、臨床アプリケーションの基準を満たします。
Conventional computer-assisted orthopaedic navigation systems rely on the tracking of dedicated optical markers for patient poses, which makes the surgical workflow more invasive, tedious, and expensive. Visual tracking has recently been proposed to measure the target anatomy in a markerless and effortless way, but the existing methods fail under real-world occlusion caused by intraoperative interventions. Furthermore, such methods are hardware-specific and not accurate enough for surgical applications. In this paper, we propose a RGB-D sensing-based markerless tracking method that is robust against occlusion. We design a new segmentation network that features dynamic region-of-interest prediction and robust 3D point cloud segmentation. As it is expensive to collect large-scale training data with occlusion instances, we also propose a new method to create synthetic RGB-D images for network training. Experimental results show that our proposed markerless tracking method outperforms recent state-of-the-art approaches by a large margin, especially when an occlusion exists. Furthermore, our method generalises well to new cameras and new target models, including a cadaver, without the need for network retraining. In practice, by using a high-quality commercial RGB-D camera, our proposed visual tracking method achieves an accuracy of 1-2 degress and 2-4 mm on a model knee, which meets the standard for clinical applications.
updated: Tue Aug 24 2021 09:49:08 GMT+0000 (UTC)
published: Tue Aug 24 2021 09:49:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト