arXiv reaDer
MeshWalker:ランダムウォークによる深いメッシュの理解
MeshWalker: Deep Mesh Understanding by Random Walks
ディープラーニング用の3D形状を表現しようとするほとんどの試みは、ボリュームグリッド、マルチビュー画像、点群に焦点を当てています。このホワイトペーパーでは、コンピュータグラフィックスで最も一般的な3D形状(三角形メッシュ)を取り上げ、ディープラーニングでどのように利用できるかを説明します。この質問に答えるためのいくつかの試みは、畳み込みとプーリングを畳み込みニューラルネットワーク(CNN)に適合させることを提案しています。この論文では、与えられたメッシュから直接形状を学習するためのMeshWalkerと呼ばれる非常に異なるアプローチを提案します。重要なアイデアは、メッシュのジオメトリとトポロジを「探索」する、サーフェスに沿ったランダムウォークによってメッシュを表すことです。各ウォークは頂点のリストとして編成されます。頂点のリストは、何らかの方法でメッシュに規則性を課します。歩行は、歩行の履歴を「記憶」するリカレントニューラルネットワーク(RNN)に送られます。私たちのアプローチは、形状分類とセマンティックセグメンテーションという2つの基本的な形状分析タスクの最先端の結果を達成することを示しています。さらに、非常に少数の例でも学習に十分です。メッシュの大きなデータセットは取得が難しいため、これは非常に重要です。
Most attempts to represent 3D shapes for deep learning have focused on volumetric grids, multi-view images and point clouds. In this paper we look at the most popular representation of 3D shapes in computer graphics - a triangular mesh - and ask how it can be utilized within deep learning. The few attempts to answer this question propose to adapt convolutions & pooling to suit Convolutional Neural Networks (CNNs). This paper proposes a very different approach, termed MeshWalker, to learn the shape directly from a given mesh. The key idea is to represent the mesh by random walks along the surface, which "explore" the mesh's geometry and topology. Each walk is organized as a list of vertices, which in some manner imposes regularity on the mesh. The walk is fed into a Recurrent Neural Network (RNN) that "remembers" the history of the walk. We show that our approach achieves state-of-the-art results for two fundamental shape analysis tasks: shape classification and semantic segmentation. Furthermore, even a very small number of examples suffices for learning. This is highly important, since large datasets of meshes are difficult to acquire.
updated: Thu Dec 10 2020 15:39:51 GMT+0000 (UTC)
published: Tue Jun 09 2020 15:35:41 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト