arXiv reaDer
CeRF: レイ モデリングの派生による新しいビュー合成のための畳み込みニューラル放射輝度場
CeRF: Convolutional Neural Radiance Fields for New View Synthesis with Derivatives of Ray Modeling
近年、高忠実度の画像を生成する際に、新しいビュー合成が人気を集めています。新しいビューを合成するタスクでは優れたパフォーマンスを示していますが、これらの方法の大部分は依然としてシーン埋め込みのための従来の多層パーセプトロンに基づいています。さらに、ライト フィールド モデルはピクセル レンダリング中に幾何学的なぼやけに悩まされますが、放射輝度フィールド ベースのボリューム レンダリング方法には、密度分布統合の特定のターゲットに対して複数の解決策があります。これらの問題に対処するために、畳み込みニューラル放射フィールドを導入して、光線に沿った放射輝度の導関数をモデル化します。 1D 畳み込み演算に基づいて、私たちが提案する方法は、構造化されたニューラル ネットワーク アーキテクチャを通じて潜在的な光線表現を効果的に抽出します。さらに、提案されたレイ モデリングでは、完全ニューラル レンダリング プロセスにおける幾何学的曖昧性を解決するために、提案されたリカレント モジュールが使用されます。広範な実験により、既存の最先端の方法と比較して、私たちが提案したモデルの有望な結果が実証されました。
In recent years, novel view synthesis has gained popularity in generating high-fidelity images. While demonstrating superior performance in the task of synthesizing novel views, the majority of these methods are still based on the conventional multi-layer perceptron for scene embedding. Furthermore, light field models suffer from geometric blurring during pixel rendering, while radiance field-based volume rendering methods have multiple solutions for a certain target of density distribution integration. To address these issues, we introduce the Convolutional Neural Radiance Fields to model the derivatives of radiance along rays. Based on 1D convolutional operations, our proposed method effectively extracts potential ray representations through a structured neural network architecture. Besides, with the proposed ray modeling, a proposed recurrent module is employed to solve geometric ambiguity in the fully neural rendering process. Extensive experiments demonstrate the promising results of our proposed model compared with existing state-of-the-art methods.
updated: Sat Jun 15 2024 02:47:05 GMT+0000 (UTC)
published: Fri Jul 14 2023 02:26:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト