自動運転のための最先端の物体検出システムは、晴天時に有望な結果を達成します。ただし、このような自律型のセーフティクリティカルシステムは、雨、霧、雪などの悪天候でも機能する必要があります。残念ながら、ほとんどのアプローチは、晴天のシーンのみで構成されるKITTIデータセットでのみ評価されます。このホワイトペーパーでは、この問題に対処し、実際の気象条件でキャプチャされたデータに対して、シングルモダリティアーキテクチャとデュアルモダリティアーキテクチャの最も詳細な評価の1つを実行します。気象条件の悪化におけるこれらのアーキテクチャのパフォーマンスの低下を分析します。晴天時に良好に機能するオブジェクト検出アーキテクチャは、悪化する気象条件を処理できない可能性があることを示します。また、デュアルモダリティアーキテクチャのアブレーション研究を実行し、それらの制限を示します。
State-of-the-art object detection systems for autonomous driving achieve promising results in clear weather conditions. However, such autonomous safety critical systems also need to work in degrading weather conditions, such as rain, fog and snow. Unfortunately, most approaches evaluate only on the KITTI dataset, which consists only of clear weather scenes. In this paper we address this issue and perform one of the most detailed evaluation on single and dual modality architectures on data captured in real weather conditions. We analyse the performance degradation of these architectures in degrading weather conditions. We demonstrate that an object detection architecture performing good in clear weather might not be able to handle degrading weather conditions. We also perform ablation studies on the dual modality architectures and show their limitations.