arXiv reaDer
Pano Popups:平面対応ネットワークを使用した屋内3D再構築
Pano Popups: Indoor 3D Reconstruction with a Plane-Aware Network
 この作業では、単一の屋内360 ^∘画像からの平面境界だけでなく、深さおよび表面法線の高密度推定のために、平面認識畳み込みニューラルネットワークをトレーニングする方法を示します。提案された損失関数を使用して、当社のネットワークは、シングルビュー、屋内、全方向深度推定の既存の方法よりも優れており、360 ^∘画像からの表面法線予測の初期ベンチマークを提供します。私たちの改善は、主な曲率を平面境界の指標として活用する新しい平面認識損失の使用によるものです。また、ネットワーク事前分布として測地座標マップを含めると、表面法線予測の精度が大幅に向上することも示しています。最後に、ネットワークの出力を組み合わせて、屋内シーンの高品質な3D「ポップアップ」モデルを生成する方法を示します。
In this work we present a method to train a plane-aware convolutional neural network for dense depth and surface normal estimation as well as plane boundaries from a single indoor 360^∘ image. Using our proposed loss function, our network outperforms existing methods for single-view, indoor, omnidirectional depth estimation and provides an initial benchmark for surface normal prediction from 360^∘ images. Our improvements are due to the use of a novel plane-aware loss that leverages principal curvature as an indicator of planar boundaries. We also show that including geodesic coordinate maps as network priors provides a significant boost in surface normal prediction accuracy. Finally, we demonstrate how we can combine our network's outputs to generate high quality 3D "pop-up" models of indoor scenes.
updated: Mon Feb 24 2020 18:59:47 GMT+0000 (UTC)
published: Mon Jul 01 2019 17:24:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト