パノラマの高解像度 (2048x1024 以上) の深度を計算するための新しいアプローチを提案します。これは、現在の最先端の方法 (360MonoDepth) よりもはるかに高速で、質的にも質的にも正確です。従来のニューラル ネットワーク ベースの方法では、GPU メモリの制約により、出力画像のサイズ (最大 1024x512) に制限があるため、360MonoDepth と私たちの方法の両方が、複数の視点の視差または深度画像をつなぎ合わせて、統合されたパノラマ深度マップを生成することに依存しています。しかし、グローバルに一貫したスティッチングを実現するために、[23] は広範な視差マップの配置とポアソンベースのブレンディングの問題を解決することに依存していたため、計算時間が長くなりました。代わりに、登録する個々のパースペクティブ深度マップの共通ターゲットとして、既存のパノラマ深度マップ (任意のパノラマベースの方法でリアルタイムで計算) を使用することを提案します。この重要なアイデアにより、単純なタスクからグローバルに一貫したステッチング結果が得られました。私たちの実験は、私たちの方法が既存のパノラマベースの方法よりも定性的に優れた結果を生成し、これらの方法では見えないデータセットで定量的に優れていることを示しています。
We propose a novel approach to compute high-resolution (2048x1024 and higher) depths for panoramas that is significantly faster and qualitatively and qualitatively more accurate than the current state-of-the-art method (360MonoDepth). As traditional neural network-based methods have limitations in the output image sizes (up to 1024x512) due to GPU memory constraints, both 360MonoDepth and our method rely on stitching multiple perspective disparity or depth images to come out a unified panoramic depth map. However, to achieve globally consistent stitching, [23] relied on solving extensive disparity map alignment and Poisson-based blending problems, leading to high computation time. Instead, we propose to use an existing panoramic depth map (computed in real-time by any panorama-based method) as the common target for the individual perspective depth maps to register to. This key idea made producing globally consistent stitching results from a straightforward task. Our experiments show that our method generates qualitatively better results than existing panorama-based methods, and further outperforms them quantitatively on datasets unseen by these methods.