arXiv reaDer
Generative VoxelNet:3D形状の合成と分析のためのエネルギーベースのモデルの学習
Generative VoxelNet: Learning Energy-Based Models for 3D Shape Synthesis and Analysis
オブジェクトやシーンの豊富なジオメトリ情報を含む3Dデータは、3D物理世界を理解するのに役立ちます。最近の大規模な3Dデータセットの出現により、3D形状の合成と分析のための強力な3D生成モデルを持つことがますます重要になっています。この論文は、体積形状を表すための深い3Dエネルギーベースのモデルを提案します。モデルの最尤トレーニングは、「合成による分析」スキームに従います。提案されたモデルの利点は6つあります。1つは、GANやVAEとは異なり、モデルトレーニングは補助モデルに依存しません。次に、モデルはマルコフ連鎖モンテカルロ(MCMC)によってリアルな3D形状を合成できます。第三に、条件付きモデルは3Dオブジェクトの回復と超解像に適用できます。第4に、モデルは、高解像度の3D形状合成のためのマルチグリッドモデリングおよびサンプリングフレームワークのビルディングブロックとして機能できます。第5に、このモデルを使用して、MCMCティーチングを介して3Dジェネレーターをトレーニングできます。第6に、監視なしでトレーニングされたモデルは、3Dデータの強力な特徴抽出器を提供します。これは3Dオブジェクトの分類に役立ちます。実験は、提案されたモデルが高品質の3D形状パターンを生成でき、さまざまな3D形状分析に役立つ可能性があることを示しています。
3D data that contains rich geometry information of objects and scenes is valuable for understanding 3D physical world. With the recent emergence of large-scale 3D datasets, it becomes increasingly crucial to have a powerful 3D generative model for 3D shape synthesis and analysis. This paper proposes a deep 3D energy-based model to represent volumetric shapes. The maximum likelihood training of the model follows an "analysis by synthesis" scheme. The benefits of the proposed model are six-fold: first, unlike GANs and VAEs, the model training does not rely on any auxiliary models; second, the model can synthesize realistic 3D shapes by Markov chain Monte Carlo (MCMC); third, the conditional model can be applied to 3D object recovery and super resolution; fourth, the model can serve as a building block in a multi-grid modeling and sampling framework for high resolution 3D shape synthesis; fifth, the model can be used to train a 3D generator via MCMC teaching; sixth, the unsupervisedly trained model provides a powerful feature extractor for 3D data, which is useful for 3D object classification. Experiments demonstrate that the proposed model can generate high-quality 3D shape patterns and can be useful for a wide variety of 3D shape analysis.
updated: Fri Dec 25 2020 06:09:36 GMT+0000 (UTC)
published: Fri Dec 25 2020 06:09:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト