arXiv reaDer
X 線から CT への画像融合のための自己管理型 2D/3D レジストレーション
Self-Supervised 2D/3D Registration for X-Ray to CT Image Fusion
ディープ ラーニング ベースの 2D/3D レジストレーションにより、大規模な注釈付きペア データセットがトレーニングに使用できる場合、高速、堅牢、かつ正確な X 線画像と CT 画像の融合が可能になります。ただし、ペアの CT ボリュームとグラウンド トゥルース レジストレーションを備えた X 線画像の必要性により、介入シナリオでの適用性が制限されます。別の方法は、CT ボリュームからのシミュレートされた X 線投影を使用することです。これにより、ペアの注釈付きデータセットが不要になります。シミュレートされた X 線投影のみでトレーニングされたディープ ニューラル ネットワークは、ドメイン ギャップが原因で、実際の X 線画像ではパフォーマンスが大幅に低下する可能性があります。ドメインギャップを克服し、ペアの注釈付きデータセットの必要性を排除するために、シミュレートされたトレーニングと教師なし機能およびピクセル空間ドメイン適応を組み合わせた自己教師あり 2D/3D 登録フレームワークを提案します。私たちのフレームワークは、1.83±1.16 mm の登録精度を実現し、実際の X 線画像で 90.1% の高い成功率を達成し、参照アノテーションのないアルゴリズムと比較して成功率が 23.9% 増加しています。
Deep Learning-based 2D/3D registration enables fast, robust, and accurate X-ray to CT image fusion when large annotated paired datasets are available for training. However, the need for paired CT volume and X-ray images with ground truth registration limits the applicability in interventional scenarios. An alternative is to use simulated X-ray projections from CT volumes, thus removing the need for paired annotated datasets. Deep Neural Networks trained exclusively on simulated X-ray projections can perform significantly worse on real X-ray images due to the domain gap. We propose a self-supervised 2D/3D registration framework combining simulated training with unsupervised feature and pixel space domain adaptation to overcome the domain gap and eliminate the need for paired annotated datasets. Our framework achieves a registration accuracy of 1.83±1.16 mm with a high success ratio of 90.1% on real X-ray images showing a 23.9% increase in success ratio compared to reference annotation-free algorithms.
updated: Fri Oct 14 2022 08:06:57 GMT+0000 (UTC)
published: Fri Oct 14 2022 08:06:57 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト