arXiv reaDer
R4Dyn:動的シーンの自己監視単眼深度推定のためのレーダーの調査
R4Dyn: Exploring Radar for Self-Supervised Monocular Depth Estimation of Dynamic Scenes
運転シナリオでの自己監視単眼深度推定は、監視ありアプローチと同等のパフォーマンスを達成しましたが、静的な世界の仮定に違反すると、交通参加者の誤った深度予測につながる可能性があり、潜在的な安全上の問題が発生します。この論文では、自己監視深度推定フレームワークの上に費用効果の高いレーダーデータを使用するための新しい技術セットであるR4Dynを紹介します。特に、トレーニング中にレーダーを弱い監視信号として使用する方法と、推論時の推定のロバスト性を強化するための追加の入力を示します。自動車用レーダーはすぐに利用できるため、これにより、さまざまな既存の車両からトレーニングデータを収集できます。さらに、信号をフィルタリングおよび拡張して学習ベースのアプローチと互換性を持たせることにより、ノイズやスパース性などのレーダー固有の問題に対処します。 R4Dynを使用すると、自己監視による深度推定の主な制限、つまりトラフィック参加者の予測を克服できます。挑戦的なnuScenesデータセットで自動車などの動的オブジェクトの推定を37%大幅に改善しました。したがって、レーダーが自動運転車の単眼深度推定のための貴重な追加センサーであることを示しています。
While self-supervised monocular depth estimation in driving scenarios has achieved comparable performance to supervised approaches, violations of the static world assumption can still lead to erroneous depth predictions of traffic participants, posing a potential safety issue. In this paper, we present R4Dyn, a novel set of techniques to use cost-efficient radar data on top of a self-supervised depth estimation framework. In particular, we show how radar can be used during training as weak supervision signal, as well as an extra input to enhance the estimation robustness at inference time. Since automotive radars are readily available, this allows to collect training data from a variety of existing vehicles. Moreover, by filtering and expanding the signal to make it compatible with learning-based approaches, we address radar inherent issues, such as noise and sparsity. With R4Dyn we are able to overcome a major limitation of self-supervised depth estimation, i.e. the prediction of traffic participants. We substantially improve the estimation on dynamic objects, such as cars by 37% on the challenging nuScenes dataset, hence demonstrating that radar is a valuable additional sensor for monocular depth estimation in autonomous vehicles.
updated: Mon Nov 29 2021 18:29:54 GMT+0000 (UTC)
published: Tue Aug 10 2021 17:57:03 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト