arXiv reaDer
Incremental Scene Synthesis
 次のプロパティを持つ完全な2Dまたは3Dシーンをインクリメンタルに生成する方法を示します:(a)事前に学習したシーンに応じて各ステップでグローバルに一貫性がある、(b)グローバルな一貫性を観察しながらシーンの実際の観察を組み込むことができる、 (c)観測されていない領域は、以前の観測、幻覚、およびグローバル事前分布と一致して局所的に幻覚化できます。(d)幻覚は本質的に統計的です。つまり、同じ観測から異なるシーンを生成できます。これを実現するために、各ステップでアクティブなエージェントがシーンの観察された部分を知覚するか、ローカルな幻覚を生成できる仮想シーンをモデル化します。後者は、シーン全体のこのステップでのエージェントの期待として解釈でき、自律ナビゲーションに適用できます。各ポイントで実際のデータを観察することの限界において、我々の方法はSLAM問題の解決に収束します。それ以外の場合は、以前の分布から完全に想像されたシーンをサンプリングできます。自律エージェントに加えて、アプリケーションには、堅牢な実世界のアプリケーションを構築するために大きなデータが必要であるが、利用できるサンプルがほとんどないという問題が含まれます。さまざまな2Dおよび3Dデータで有効性を実証します。
We present a method to incrementally generate complete 2D or 3D scenes with the following properties: (a) it is globally consistent at each step according to a learned scene prior, (b) real observations of a scene can be incorporated while observing global consistency, (c) unobserved regions can be hallucinated locally in consistence with previous observations, hallucinations and global priors, and (d) hallucinations are statistical in nature, i.e., different scenes can be generated from the same observations. To achieve this, we model the virtual scene, where an active agent at each step can either perceive an observed part of the scene or generate a local hallucination. The latter can be interpreted as the agent's expectation at this step through the scene and can be applied to autonomous navigation. In the limit of observing real data at each point, our method converges to solving the SLAM problem. It can otherwise sample entirely imagined scenes from prior distributions. Besides autonomous agents, applications include problems where large data is required for building robust real-world applications, but few samples are available. We demonstrate efficacy on various 2D as well as 3D data.
updated: Wed Nov 13 2019 19:50:54 GMT+0000 (UTC)
published: Thu Nov 29 2018 16:41:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト