デジタル化された3D歯科モデルから歯を正確にセグメント化する機能は、コンピューター支援の歯科矯正手術計画において不可欠なタスクです。これまで、このタスクを処理するためにディープラーニングベースの方法が広く使用されてきました。最先端の方法は、3D入力の生の属性、つまりメッシュセルの座標と法線ベクトルを直接連結して、完全に自動化された歯のセグメンテーションのためのシングルストリームネットワークをトレーニングします。ただし、これには、これらの生の属性によって提供されるさまざまな幾何学的意味を無視するという欠点があります。この問題は、識別可能な幾何学的特徴を学習する際にネットワークを混乱させ、歯科モデルで多くの孤立した誤った予測をもたらす可能性があります。この問題に対して、さまざまな幾何学的属性からマルチビューの幾何学的情報を学習するために、2ストリームグラフ畳み込みネットワーク(TSGCNet)を提案します。 TSGCNetは、入力を意識した方法で設計された2つのグラフ学習ストリームを採用して、それぞれ座標と法線ベクトルからより識別力のある高レベルの幾何学的表現を抽出します。設計された2つの異なるストリームから学習されたこれらの特徴表現は、セルごとの高密度予測タスクのマルチビュー補完情報を統合するためにさらに融合されます。 3D口腔内スキャナーによって取得された歯科モデルの実際の患者データセットで提案されたTSGCNetを評価し、実験結果は、私たちの方法が3D形状セグメンテーションの最先端の方法を大幅に上回っていることを示しています。
The ability to segment teeth precisely from digitized 3D dental models is an essential task in computer-aided orthodontic surgical planning. To date, deep learning based methods have been popularly used to handle this task. State-of-the-art methods directly concatenate the raw attributes of 3D inputs, namely coordinates and normal vectors of mesh cells, to train a single-stream network for fully-automated tooth segmentation. This, however, has the drawback of ignoring the different geometric meanings provided by those raw attributes. This issue might possibly confuse the network in learning discriminative geometric features and result in many isolated false predictions on the dental model. Against this issue, we propose a two-stream graph convolutional network (TSGCNet) to learn multi-view geometric information from different geometric attributes. Our TSGCNet adopts two graph-learning streams, designed in an input-aware fashion, to extract more discriminative high-level geometric representations from coordinates and normal vectors, respectively. These feature representations learned from the designed two different streams are further fused to integrate the multi-view complementary information for the cell-wise dense prediction task. We evaluate our proposed TSGCNet on a real-patient dataset of dental models acquired by 3D intraoral scanners, and experimental results demonstrate that our method significantly outperforms state-of-the-art methods for 3D shape segmentation.