arXiv reaDer
DECOR-GAN:条件付きリファインメントによる3D形状の詳細化
DECOR-GAN: 3D Shape Detailization by Conditional Refinement
幾何学的なディテールをスタイルにしたスタイル化に似た、3D形状のディテール化のための深い生成ネットワークを紹介します。問題を幾何学的詳細転送の問題として扱うことにより、小さなセットのエグザンプラから多種多様な高解像度で詳細な3Dジオメトリを作成するという課題に対処します。低解像度の粗いボクセル形状が与えられた場合、私たちのネットワークは、ボクセルのアップサンプリングを介して、幾何学的な詳細が豊富な高解像度の形状にそれを洗練します。出力形状は、入力の全体的な構造(またはコンテンツ)を保持しますが、その詳細の生成は、詳細なエグザンプラに対応する入力「スタイルコード」を条件とします。条件付きリファインメントによる3Dの詳細化は、敵対的生成ネットワークであるDECOR-GANによって実現されます。ネットワークは、粗いボクセルをアップサンプリングするための3D CNNジェネレーターと、生成されたモデルのローカルパッチをトレーニングの詳細な形状のものと同様にするための3DPatchGANディスクリミネーターを利用します。テスト中に、スタイルコードがジェネレーターに入力され、改良が調整されます。私たちの方法が、粗い形状をさまざまなスタイルのさまざまな詳細な形状に洗練できることを示します。生成された結果は、コンテンツの保存、妥当性、および多様性の観点から評価されます。ネットワーク設計を検証するために、包括的なアブレーション研究が実施されています。
We introduce a deep generative network for 3D shape detailization, akin to stylization with the style being geometric details. We address the challenge of creating large varieties of high-resolution and detailed 3D geometry from a small set of exemplars by treating the problem as that of geometric detail transfer. Given a low-resolution coarse voxel shape, our network refines it, via voxel upsampling, into a higher-resolution shape enriched with geometric details. The output shape preserves the overall structure (or content) of the input, while its detail generation is conditioned on an input "style code" corresponding to a detailed exemplar. Our 3D detailization via conditional refinement is realized by a generative adversarial network, coined DECOR-GAN. The network utilizes a 3D CNN generator for upsampling coarse voxels and a 3D PatchGAN discriminator to enforce local patches of the generated model to be similar to those in the training detailed shapes. During testing, a style code is fed into the generator to condition the refinement. We demonstrate that our method can refine a coarse shape into a variety of detailed shapes with different styles. The generated results are evaluated in terms of content preservation, plausibility, and diversity. Comprehensive ablation studies are conducted to validate our network designs.
updated: Wed Dec 16 2020 18:52:10 GMT+0000 (UTC)
published: Wed Dec 16 2020 18:52:10 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト