点群の形で3D形状を直接合成するための新しい教師なし球誘導生成モデルであるSP-GANを紹介します。 SP-GANは、既存のモデルと比較して、多様で高品質な形状を細部まで合成し、部品を意識した形状の生成と操作の制御性を促進しながら、部品の注釈なしでトレーニング可能です。 SP-GANでは、グローバルプライア(球上の均一なポイント)を組み込んで生成プロセスを空間的にガイドし、ローカルプライア(ランダムな潜在コード)を各球ポイントにアタッチしてローカルの詳細を提供します。私たちの設計における重要な洞察は、複雑な3D形状生成タスクをグローバルな形状モデリングとローカルな構造調整に解きほぐし、学習プロセスを容易にし、形状生成の品質を向上させることです。また、私たちのモデルは、球の点と生成されたすべての形状の点との間に暗黙の密な対応を形成し、パーツの編集、パーツごとの形状補間、マルチシェイプのパーツ構成など、さまざまな形式の構造認識形状操作を可能にします。既存の生成モデルを超えて。視覚的評価と定量的評価の両方を含む実験結果は、私たちのモデルが、最先端のモデルと比較して、細部が細かく、ノイズが少ない多様な点群を合成できることを示しています。
We present SP-GAN, a new unsupervised sphere-guided generative model for direct synthesis of 3D shapes in the form of point clouds. Compared with existing models, SP-GAN is able to synthesize diverse and high-quality shapes with fine details and promote controllability for part-aware shape generation and manipulation, yet trainable without any parts annotations. In SP-GAN, we incorporate a global prior (uniform points on a sphere) to spatially guide the generative process and attach a local prior (a random latent code) to each sphere point to provide local details. The key insight in our design is to disentangle the complex 3D shape generation task into a global shape modeling and a local structure adjustment, to ease the learning process and enhance the shape generation quality. Also, our model forms an implicit dense correspondence between the sphere points and points in every generated shape, enabling various forms of structure-aware shape manipulations such as part editing, part-wise shape interpolation, and multi-shape part composition, etc., beyond the existing generative models. Experimental results, which include both visual and quantitative evaluations, demonstrate that our model is able to synthesize diverse point clouds with fine details and less noise, as compared with the state-of-the-art models.