arXiv reaDer
LaplacianNet: Learning on 3D Meshes with Laplacian Encoding and Pooling
 3Dモデルは、一般的にコンピュータービジョンとグラフィックスで使用されます。メッシュデータの可用性が広くなっているため、3Dメッシュを処理するための効率的で本質的な深層学習アプローチが非常に必要です。画像とは異なり、3Dメッシュは不規則な接続性を持っているため、データの関係をキャプチャするには慎重な設計が必要です。さまざまな三角測量の下で堅牢性を維持しながらトポロジ情報を利用するには、ラプラシアンスペクトル解析を使用してメッシュ接続をエンコードし、表面ドメインをローカルプーリングパッチに分割し、それらの間でグローバル情報を集約できるメッシュプーリングブロック(MPB)を提案します。等尺性変換の下で柔軟なラプラシアンスペクトルクラスタリングを使用して、細かいメッシュから粗いメッシュの階層を構築します。 MPB内には、ローカル情報を収集するためのプーリング層と、複雑さを増して頂点機能を計算するための多層パーセプトロンがあります。異なるクラスター間の関係を取得するために、相関ネットを導入して相関マトリックスを計算します。これは、クラスターフィーチャとのマトリックス乗算によってフィーチャをグローバルに集約できます。私たちのネットワークアーキテクチャは、頂点の数が異なるメッシュで使用するのに十分な柔軟性を備えています。形状のセグメンテーションと分類を含むいくつかの実験を実施し、LaplacianNetはShapeNetおよびCOSEGデータセットでこれらのタスクに対して最先端のアルゴリズムよりも優れています。
3D models are commonly used in computer vision and graphics. With the wider availability of mesh data, an efficient and intrinsic deep learning approach to processing 3D meshes is in great need. Unlike images, 3D meshes have irregular connectivity, requiring careful design to capture relations in the data. To utilize the topology information while staying robust under different triangulation, we propose to encode mesh connectivity using Laplacian spectral analysis, along with Mesh Pooling Blocks (MPBs) that can split the surface domain into local pooling patches and aggregate global information among them. We build a mesh hierarchy from fine to coarse using Laplacian spectral clustering, which is flexible under isometric transformation. Inside the MPBs there are pooling layers to collect local information and multi-layer perceptrons to compute vertex features with increasing complexity. To obtain the relationships among different clusters, we introduce a Correlation Net to compute a correlation matrix, which can aggregate the features globally by matrix multiplication with cluster features. Our network architecture is flexible enough to be used on meshes with different numbers of vertices. We conduct several experiments including shape segmentation and classification, and our LaplacianNet outperforms state-of-the-art algorithms for these tasks on ShapeNet and COSEG datasets.
updated: Wed Oct 30 2019 18:02:23 GMT+0000 (UTC)
published: Wed Oct 30 2019 18:02:23 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト