arXiv reaDer
Depth360: Monocular Depth Estimation using Learnable Axisymmetric Camera Model for Spherical Camera Image
RGB画像から深度画像と相対ポーズを推定するために、自己監視単眼深度推定が広く研究されてきました。このフレームワークは、グラウンドトゥルースの深度とポーズを必要とせずに、時系列画像から深度とポーズのネットワークをトレーニングできるため、研究者にとって魅力的です。この作業では、パラメーターが不明なカメラから、時系列の球形カメラ画像を使用してロボットの周囲の深度(360度ビュー)を推定します。 2つの魚眼カメラ画像で歪んだ球形カメラ画像を受け入れる学習可能な軸対称カメラモデルを提案します。さらに、監視を提供するためにグラウンドトゥルース深度画像を生成するために、フォトリアリスティックシミュレーターを使用してモデルをトレーニングしました。さらに、損失関数を導入して床の制約を提供し、反射する床面から生じる可能性のあるアーティファクトを減らしました。 GO Stanfordデータセットの球形カメラ画像とKITTIデータセットのピンホールカメラ画像を使用して、この方法の有効性を示し、カメラパラメータの学習におけるベースライン方法のパフォーマンスと比較します。
Self-supervised monocular depth estimation has been widely investigated to estimate depth images and relative poses from RGB images. This framework is attractive for researchers because the depth and pose networks can be trained from just time sequence images without the need for the ground truth depth and poses. In this work, we estimate the depth around a robot (360 degree view) using time sequence spherical camera images, from a camera whose parameters are unknown. We propose a learnable axisymmetric camera model which accepts distorted spherical camera images with two fisheye camera images. In addition, we trained our models with a photo-realistic simulator to generate ground truth depth images to provide supervision. Moreover, we introduced loss functions to provide floor constraints to reduce artifacts that can result from reflective floor surfaces. We demonstrate the efficacy of our method using the spherical camera images from the GO Stanford dataset and pinhole camera images from the KITTI dataset to compare our method's performance with that of baseline method in learning the camera parameters.
updated: Wed Oct 20 2021 07:21:04 GMT+0000 (UTC)
published: Wed Oct 20 2021 07:21:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト