arXiv reaDer
単一の例からのパッチベースの 3D 自然シーンの生成
Patch-based 3D Natural Scene Generation from a Single Example
通常、ユニークで複雑な一般的な自然シーンの 3D 生成モデルをターゲットにしています。必要な量のトレーニング データが不足していることに加えて、さまざまなシーン特性が存在する場合にアドホックな設計を行うことの難しさにより、既存のセットアップは扱いにくくなっています。古典的なパッチベースの画像モデルに着想を得て、1 つの例を挙げて、パッチ レベルで 3D シーンを合成することを提唱します。この作業の中核には、シーン表現と生成パッチ最近傍モジュールに関する重要なアルゴリズム設計があり、従来の 2D パッチベースのフレームワークを 3D 生成に持ち上げることから生じる固有の課題に対処します。これらの設計上の選択は、集合的なレベルで、さまざまな見本で実証されているように、現実的な幾何学的構造と視覚的外観の両方を備えた高品質の一般的な自然シーンを大量かつ多様に生成できる、堅牢で効果的かつ効率的なモデルに貢献します。シーン。
We target a 3D generative model for general natural scenes that are typically unique and intricate. Lacking the necessary volumes of training data, along with the difficulties of having ad hoc designs in presence of varying scene characteristics, renders existing setups intractable. Inspired by classical patch-based image models, we advocate for synthesizing 3D scenes at the patch level, given a single example. At the core of this work lies important algorithmic designs w.r.t the scene representation and generative patch nearest-neighbor module, that address unique challenges arising from lifting classical 2D patch-based framework to 3D generation. These design choices, on a collective level, contribute to a robust, effective, and efficient model that can generate high-quality general natural scenes with both realistic geometric structure and visual appearance, in large quantities and varieties, as demonstrated upon a variety of exemplar scenes.
updated: Wed Apr 26 2023 10:34:49 GMT+0000 (UTC)
published: Tue Apr 25 2023 09:19:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト