arXiv reaDer
TetCNN: 四面体メッシュ上の畳み込みニューラル ネットワーク
TetCNN: Convolutional Neural Networks on Tetrahedral Meshes
畳み込みニューラル ネットワーク (CNN) は、画像、ビデオ、グラフ、三角メッシュについて広く研究されてきました。ただし、四面体メッシュについてはほとんど研究されていません。脳画像解析などのアプリケーションでボリュメトリック メッシュを使用する利点を考慮して、四面体メッシュ構造用の新しい解釈可能なグラフ CNN フレームワークを紹介します。 ChebyNet に着想を得た私たちのモデルは、ボリューム ラプラス ベルトラミ オペレーター (LBO) を利用して、3D 多様体のリーマン計量情報を欠く、一般的に使用されるグラフ ラプラシアンに対するフィルターを定義します。プーリングの適応のために、LBO に基づく Graclus アルゴリズムの局所的な最小カットのための新しい目的関数を導入します。クラスタリング割り当て行列を使用して、各プーリング後にサンプリングされたメッシュの LBO を推定する区分定数近似スキームを採用しています。最後に、勾配加重クラス アクティベーション マッピング アルゴリズムを四面体メッシュに適用し、取得したヒートマップを使用して、発見された関心領域をバイオマーカーとして視覚化します。皮質の厚さと神経変性疾患の進行との相関関係を示す科学的証拠があるため、アルツハイマー病患者の皮質四面体メッシュに対するモデルの有効性を実証します。私たちの結果は、LBO ベースの畳み込みレイヤーと、従来使用されていた単一の皮質の厚さ、グラフ ラプラシアン、および点群表現に対する適応プーリングの優位性を示しています。
Convolutional neural networks (CNN) have been broadly studied on images, videos, graphs, and triangular meshes. However, it has seldom been studied on tetrahedral meshes. Given the merits of using volumetric meshes in applications like brain image analysis, we introduce a novel interpretable graph CNN framework for the tetrahedral mesh structure. Inspired by ChebyNet, our model exploits the volumetric Laplace-Beltrami Operator (LBO) to define filters over commonly used graph Laplacian which lacks the Riemannian metric information of 3D manifolds. For pooling adaptation, we introduce new objective functions for localized minimum cuts in the Graclus algorithm based on the LBO. We employ a piece-wise constant approximation scheme that uses the clustering assignment matrix to estimate the LBO on sampled meshes after each pooling. Finally, adapting the Gradient-weighted Class Activation Mapping algorithm for tetrahedral meshes, we use the obtained heatmaps to visualize discovered regions-of-interest as biomarkers. We demonstrate the effectiveness of our model on cortical tetrahedral meshes from patients with Alzheimer's disease, as there is scientific evidence showing the correlation of cortical thickness to neurodegenerative disease progression. Our results show the superiority of our LBO-based convolution layer and adapted pooling over the conventionally used unitary cortical thickness, graph Laplacian, and point cloud representation.
updated: Wed Feb 08 2023 01:52:48 GMT+0000 (UTC)
published: Wed Feb 08 2023 01:52:48 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト