arXiv reaDer
教師なし埋め込みを使用したライブ画像ベースの脳神経外科ガイダンスとロードマップ生成
Live image-based neurosurgical guidance and roadmap generation using unsupervised embedding
高度な低侵襲脳神経外科ナビゲーションは、主に磁気共鳴画像 (MRI) ガイダンスに依存しています。ただし、MRI ガイダンスは、ほとんどの場合、術前の情報しか提供しません。手術が始まると、手術による解剖学的変化のために、このガイダンスの価値はある程度低下します。内視鏡などの外科用デバイスから直接得られるライブ画像フィードバックによるガイダンスは、MRI ベースのナビゲーションを補完するか、MRI ガイダンスが実現できない場合の代替手段となります。この動機により、注釈付きの脳神経外科ビデオの大規模なデータセットを活用したライブ画像のみのガイダンスの方法を提示します。最初に、脳神経外科画像の解剖学的構造の検出に関するディープラーニングベースのオブジェクト検出方法、YOLO のパフォーマンスを報告します。第二に、患者間の正確な解剖学的一致、大規模な解剖学的アトラスの存在、または同時ローカリゼーションとマッピングの必要性を想定せずに、教師なし埋め込みを使用して脳神経外科ロードマップを生成する方法を提示します。生成されたロードマップは、トレーニング セット内の手術で使用される一般的な解剖学的パスをエンコードします。推論では、ロードマップを使用して、パス上のライブ画像フィードバックを使用して外科医の現在位置をマッピングし、マッピング アプリケーションのように、前方または後方に表示される構造を予測できるようにすることでガイダンスを提供できます。埋め込みは位置情報によって監視されていませんが、脳内および手術経路上の位置に相関していることを示しています。 166 回の経蝶形骨腺摘出術のデータセットを使用して、提案された方法をトレーニングし、評価しました。
Advanced minimally invasive neurosurgery navigation relies mainly on Magnetic Resonance Imaging (MRI) guidance. MRI guidance, however, only provides pre-operative information in the majority of the cases. Once the surgery begins, the value of this guidance diminishes to some extent because of the anatomical changes due to surgery. Guidance with live image feedback coming directly from the surgical device, e.g., endoscope, can complement MRI-based navigation or be an alternative if MRI guidance is not feasible. With this motivation, we present a method for live image-only guidance leveraging a large data set of annotated neurosurgical videos.First, we report the performance of a deep learning-based object detection method, YOLO, on detecting anatomical structures in neurosurgical images. Second, we present a method for generating neurosurgical roadmaps using unsupervised embedding without assuming exact anatomical matches between patients, presence of an extensive anatomical atlas, or the need for simultaneous localization and mapping. A generated roadmap encodes the common anatomical paths taken in surgeries in the training set. At inference, the roadmap can be used to map a surgeon's current location using live image feedback on the path to provide guidance by being able to predict which structures should appear going forward or backward, much like a mapping application. Even though the embedding is not supervised by position information, we show that it is correlated to the location inside the brain and on the surgical path. We trained and evaluated the proposed method with a data set of 166 transsphenoidal adenomectomy procedures.
updated: Fri Mar 31 2023 12:52:24 GMT+0000 (UTC)
published: Fri Mar 31 2023 12:52:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト