arXiv reaDer
解剖学的頭蓋骨モデルを二重透視X線画像に登録するための人工X線写真ランドマークデータセットからの学習の伝達
Transfer Learning from an Artificial Radiograph-landmark Dataset for Registration of the Anatomic Skull Model to Dual Fluoroscopic X-ray Images
3D解剖学的構造を2Dデュアル透視X線画像に登録することは、広く使用されているモーショントラッキング技術です。ただし、ディープラーニングの実装は、医用画像とグラウンドトゥルースの不足によって妨げられることがよくあります。この研究では、人工データセットからトレーニングされたディープニューラルネットワークを使用して、3Dから2Dへの登録のための転移学習戦略を提案しました。デジタルで再構成されたX線写真(DRR)とX線写真の頭蓋骨のランドマークは、女性被験者の頭頸部CTデータから自動的に作成されました。これらは、ランドマーク検出用の残余ネットワーク(ResNet)と、DRRと実際のX線のスタイルの違いを排除するためのサイクル生成敵対的ネットワーク(GAN)をトレーニングするために使用されました。 GANスタイルの変換を経験しているX線上のランドマークは、ResNetによって検出され、実際のデュアル透視画像で頭蓋骨の3Dから2Dへの登録のための三角測量の最適化に使用されました(非直交セットアップ、ポイントX線を使用)ソース、画像の歪み、および部分的にキャプチャされた頭蓋骨領域)。登録精度は、頭頸部運動の複数のシナリオで評価されました。歩行では、頭蓋骨の学習ベースの登録には、3.9±2.1度/4.6±2.2mmの角度/位置誤差がありました。ただし、エンドレンジ位置の二重透視画像に画像化された頭蓋骨領域が小さすぎるため、機能的な首の活動中は精度が低くなりました。人工トレーニングデータを戦略的に増強する方法論は、複雑な頭蓋骨登録シナリオに取り組むことができ、広範な登録シナリオに拡張できる可能性があります。
Registration of 3D anatomic structures to their 2D dual fluoroscopic X-ray images is a widely used motion tracking technique. However, deep learning implementation is often impeded by a paucity of medical images and ground truths. In this study, we proposed a transfer learning strategy for 3D-to-2D registration using deep neural networks trained from an artificial dataset. Digitally reconstructed radiographs (DRRs) and radiographic skull landmarks were automatically created from craniocervical CT data of a female subject. They were used to train a residual network (ResNet) for landmark detection and a cycle generative adversarial network (GAN) to eliminate the style difference between DRRs and actual X-rays. Landmarks on the X-rays experiencing GAN style translation were detected by the ResNet, and were used in triangulation optimization for 3D-to-2D registration of the skull in actual dual-fluoroscope images (with a non-orthogonal setup, point X-ray sources, image distortions, and partially captured skull regions). The registration accuracy was evaluated in multiple scenarios of craniocervical motions. In walking, learning-based registration for the skull had angular/position errors of 3.9 +- 2.1 deg / 4.6 +- 2.2 mm. However, the accuracy was lower during functional neck activity, due to overly small skull regions imaged on the dual fluoroscopic images at end-range positions. The methodology to strategically augment artificial training data can tackle the complicated skull registration scenario, and has potentials to extend to widespread registration scenarios.
updated: Sat Aug 14 2021 04:49:36 GMT+0000 (UTC)
published: Sat Aug 14 2021 04:49:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト