arXiv reaDer
単一の正距円筒図法画像からの歪みを意識した自己監視360°深度推定
Distortion-Aware Self-Supervised 360° Depth Estimation from A Single Equirectangular Projection Image
360°画像は過去数年間で広く利用可能です。この論文は、開放環境下での単一の360°画像深度予測のための新しい技術を提案した。 360°の単一画像からの深度予測は、2つの理由から簡単ではありません。 1つは、監視データセットの制限です。現在利用可能なデータセットは、屋内シーンに限定されています。もう1つは、正距円筒図法(ERP)によって引き起こされる問題で、360°画像に一般的に使用されます。これは座標と歪みです。キューブマップ投影を使用して6つの透視画像を生成し、これらの問題に対処するために透視深度予測に動画を使用した自己監視学習を適用する方法は1つしかありません。既存の方法とは異なり、ERP形式を直接使用します。対応の座標変換と歪みを意識したアップサンプリングモジュールを備えたERPを直接使用するフレームワークを提案し、ERP関連の問題に対処し、オープン環境向けの自己監視学習方法を拡張します。実験では、まず評価用のデータセットを作成し、屋外シーンでの深度予測を定量的に評価します。最先端の技術よりも優れていることを示します
360° images are widely available over the last few years. This paper proposes a new technique for single 360° image depth prediction under open environments. Depth prediction from a 360° single image is not easy for two reasons. One is the limitation of supervision datasets - the currently available dataset is limited to indoor scenes. The other is the problems caused by Equirectangular Projection Format (ERP), commonly used for 360° images, that are coordinate and distortion. There is only one method existing that uses cube map projection to produce six perspective images and apply self-supervised learning using motion pictures for perspective depth prediction to deal with these problems. Different from the existing method, we directly use the ERP format. We propose a framework of direct use of ERP with coordinate conversion of correspondences and distortion-aware upsampling module to deal with the ERP related problems and extend a self-supervised learning method for open environments. For the experiments, we firstly built a dataset for the evaluation, and quantitatively evaluate the depth prediction in outdoor scenes. We show that it outperforms the state-of-the-art technique
updated: Sun Apr 03 2022 08:28:44 GMT+0000 (UTC)
published: Sun Apr 03 2022 08:28:44 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト