構造化された変形可能なメッシュを生成するディープ生成ニューラルネットワークであるSDM-NETを紹介します。具体的には、ネットワークは、椅子、飛行機などの形状コレクションのグローバルパーツ構造を尊重する、閉じた変形可能なメッシュパーツの空間配置を生成するようにトレーニングされます。3D形状の全体構造複雑になる可能性があり、形状は通常、それぞれがボックスに同相の一連のパーツに分解でき、パーツのより細かいスケールのジオメトリは、ボックスを変形することで復元できます。 SDM-NETのアーキテクチャは、2レベルの変分オートエンコーダ(VAE)のアーキテクチャです。パーツレベルでは、PartVAEはパーツジオメトリの変形可能なモデルを学習します。構造レベルでは、Structured Parts VAE(SP-VAE)をトレーニングします。これは、形状コレクションのパーツ構造とパーツジオメトリを共同で学習し、グローバルな形状構造とサーフェスの詳細間の一貫性を確保します。広範な実験と最先端の形状の深い生成モデルとの比較を通じて、視覚的な品質、柔軟なトポロジ、意味のある構造を備えたメッシュの生成におけるSDM-NETの優位性を実証します。タスク。
We introduce SDM-NET, a deep generative neural network which produces structured deformable meshes. Specifically, the network is trained to generate a spatial arrangement of closed, deformable mesh parts, which respect the global part structure of a shape collection, e.g., chairs, airplanes, etc. Our key observation is that while the overall structure of a 3D shape can be complex, the shape can usually be decomposed into a set of parts, each homeomorphic to a box, and the finer-scale geometry of the part can be recovered by deforming the box. The architecture of SDM-NET is that of a two-level variational autoencoder (VAE). At the part level, a PartVAE learns a deformable model of part geometries. At the structural level, we train a Structured Parts VAE (SP-VAE), which jointly learns the part structure of a shape collection and the part geometries, ensuring a coherence between global shape structure and surface details. Through extensive experiments and comparisons with the state-of-the-art deep generative models of shapes, we demonstrate the superiority of SDM-NET in generating meshes with visual quality, flexible topology, and meaningful structures, which benefit shape interpolation and other subsequently modeling tasks.