高密度深度推定は、ロボット工学、3D再構成、拡張現実などの複数のアプリケーションで重要な役割を果たします。 LiDARやレーダーなどのスパース信号は、密度の高い深度推定を強化するためのガイダンスとして活用されていますが、密度が低く、分布が不均衡であるため、改善には限界があります。スパースソースからの効用を最大化するために、拡張領域の信頼性を推定しながらスパースキューから深度値を拡張するS ^ 3手法を提案します。提案されたS ^ 3は、さまざまなガイド付き深度推定アプローチに適用でき、入力、コスト量、出力など、さまざまな段階でエンドツーエンドでトレーニングできます。広範な実験により、LiDARおよびレーダー信号に対するS ^ 3手法の有効性、堅牢性、および柔軟性が実証されています。
Dense Depth estimation plays a key role in multiple applications such as robotics, 3D reconstruction, and augmented reality. While sparse signal, e.g., LiDAR and Radar, has been leveraged as guidance for enhancing dense depth estimation, the improvement is limited due to its low density and imbalanced distribution. To maximize the utility from the sparse source, we propose S^3 technique, which expands the depth value from sparse cues while estimating the confidence of expanded region. The proposed S^3 can be applied to various guided depth estimation approaches and trained end-to-end at different stages, including input, cost volume and output. Extensive experiments demonstrate the effectiveness, robustness, and flexibility of the S^3 technique on LiDAR and Radar signal.