arXiv reaDer
インテリジェント3D歯骨再建および臨床応用のためのコーンビームCTと口腔内スキャンのAI対応自動マルチモーダルフュージョン
AI-enabled Automatic Multimodal Fusion of Cone-Beam CT and Intraoral Scans for Intelligent 3D Tooth-Bone Reconstruction and Clinical Applications
仮想歯科治療計画の重要なステップは、CBCTからすべての歯の骨の構造を正確に描写し、忠実度が高く、正確な解剖学的情報を提供することです。以前の研究では、深層学習を使用したCBCTセグメンテーションのいくつかの方法が確立されています。ただし、CBCTの固有の解像度の不一致、および咬合と歯列の情報の喪失は、その臨床的適用性を大幅に制限していました。ここでは、CBCTセグメンテーションモデル、口腔内スキャン(IOS)セグメンテーションモデル(最も正確なデジタル歯科モデル)、および3D融合クラウンルートボーンを生成するための融合モデルで構成されるDeep Dental Multimodal Analysis(DDMA)フレームワークを紹介します。忠実度が高く、正確な咬合および歯列情報を備えた構造。私たちのモデルは、経験豊富な人間の専門家によって手動で注釈が付けられた503CBCTと28,559IOSメッシュを備えた大規模データセットでトレーニングされました。 CBCTセグメンテーションでは、それぞれ50 CBCTの5分割交差検証テストを使用し、モデルはそれぞれ93.99%と88.68%の平均ダイス係数とIoUを達成し、ベースラインを大幅に上回っています。 IOSセグメンテーションの場合、私たちのモデルは、200 IOSメッシュのテストセットで上顎骨と下顎骨で93.07%と95.70%のmIoUを達成します。これは、最先端の方法より1.77%と3.52%高くなっています。私たちのDDMAフレームワークは、人間の専門家による5時間以上と比較して、順次処理順序に従って融合3Dメッシュモデルを生成するのに約20〜25分かかります。特に、私たちのフレームワークはクリアアライナーメーカーによってソフトウェアに組み込まれており、実際の臨床例は、私たちのモデルが歯科矯正治療全体を通して歯冠根骨構造を視覚化し、裂開や開窓などのリスクを予測できることを示しています。これらの調査結果は、デジタル歯科モデルの品質を向上させ、歯科医がより良い臨床的決定を下すのに役立つマルチモーダルディープラーニングの可能性を示しています。
A critical step in virtual dental treatment planning is to accurately delineate all tooth-bone structures from CBCT with high fidelity and accurate anatomical information. Previous studies have established several methods for CBCT segmentation using deep learning. However, the inherent resolution discrepancy of CBCT and the loss of occlusal and dentition information largely limited its clinical applicability. Here, we present a Deep Dental Multimodal Analysis (DDMA) framework consisting of a CBCT segmentation model, an intraoral scan (IOS) segmentation model (the most accurate digital dental model), and a fusion model to generate 3D fused crown-root-bone structures with high fidelity and accurate occlusal and dentition information. Our model was trained with a large-scale dataset with 503 CBCT and 28,559 IOS meshes manually annotated by experienced human experts. For CBCT segmentation, we use a five-fold cross validation test, each with 50 CBCT, and our model achieves an average Dice coefficient and IoU of 93.99% and 88.68%, respectively, significantly outperforming the baselines. For IOS segmentations, our model achieves an mIoU of 93.07% and 95.70% on the maxillary and mandible on a test set of 200 IOS meshes, which are 1.77% and 3.52% higher than the state-of-art method. Our DDMA framework takes about 20 to 25 minutes to generate the fused 3D mesh model following the sequential processing order, compared to over 5 hours by human experts. Notably, our framework has been incorporated into a software by a clear aligner manufacturer, and real-world clinical cases demonstrate that our model can visualize crown-root-bone structures during the entire orthodontic treatment and can predict risks like dehiscence and fenestration. These findings demonstrate the potential of multi-modal deep learning to improve the quality of digital dental models and help dentists make better clinical decisions.
updated: Fri Mar 11 2022 07:50:15 GMT+0000 (UTC)
published: Fri Mar 11 2022 07:50:15 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト