arXiv reaDer
Sat2Density: 衛星と地上の画像ペアから学習した忠実な密度
Sat2Density: Faithful Density Learning from Satellite-Ground Image Pairs
この論文は、衛星と地上の画像のペアを使用して、衛星画像の正確な 3D ジオメトリ表現を開発することを目的としています。私たちは、衛星画像から 3D を認識した地上ビューを合成するという困難な問題に焦点を当てています。私たちは、ボリューム ニューラル レンダリングで使用される密度フィールド表現からインスピレーションを得て、Sat2Density と呼ばれる新しいアプローチを提案します。私たちの方法は、空と空以外の領域の地上ビュー パノラマの特性を利用して、幾何学的な遠近法で 3D シーンの忠実な密度フィールドを学習します。トレーニング中に追加の深度情報を必要とする他の方法とは異なり、Sat2Density は深度の監視なしで密度表現を通じて正確かつ忠実な 3D ジオメトリを自動的に学習できます。この進歩により、地上ビュー パノラマ合成タスクが大幅に改善されました。さらに、私たちの研究は、3D 空間における衛星画像と地上ビュー画像の関係を理解するための新しい幾何学的視点を提供します。
This paper aims to develop an accurate 3D geometry representation of satellite images using satellite-ground image pairs. Our focus is on the challenging problem of 3D-aware ground-views synthesis from a satellite image. We draw inspiration from the density field representation used in volumetric neural rendering and propose a new approach, called Sat2Density. Our method utilizes the properties of ground-view panoramas for the sky and non-sky regions to learn faithful density fields of 3D scenes in a geometric perspective. Unlike other methods that require extra depth information during training, our Sat2Density can automatically learn accurate and faithful 3D geometry via density representation without depth supervision. This advancement significantly improves the ground-view panorama synthesis task. Additionally, our study provides a new geometric perspective to understand the relationship between satellite and ground-view images in 3D space.
updated: Tue Aug 29 2023 09:33:59 GMT+0000 (UTC)
published: Sun Mar 26 2023 10:15:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト