交通事故の削減に向けた主な道筋の 1 つは、ドライバー アシスタンス システムや完全な自律性を備えたシステムによって車両の安全性を高めることです。これらのタイプのシステムでは、障害物の検出やセグメンテーションなどのタスク、特にディープ ラーニング ベースのタスクは、正確で安全なナビゲーションのためのシーンの理解において基本的な役割を果たします。それに加えて、今日の車両の多種多様なセンサーは、照明や悪天候下でのナビゲーションなど、困難な状況での認識の堅牢性を向上させるための豊富な代替手段を提供しています。この主題に与えられた現在の焦点にもかかわらず、文献には、レーダーベースおよびレーダーカメラフュージョンベースの知覚に関する研究が欠けています。したがって、この作業は、ADAS と自動運転車のカメラとレーダーに基づく認識の現在のシナリオに関する研究を実施することを目的としています。両方のセンサーに関連する概念と特性、およびそれらの融合が提示されます。さらに、ディープ ラーニング ベースの検出およびセグメンテーション タスクの概要と、主要なデータセット、メトリック、課題、および車両認識における未解決の問題について説明します。
One of the main paths towards the reduction of traffic accidents is the increase in vehicle safety through driver assistance systems or even systems with a complete level of autonomy. In these types of systems, tasks such as obstacle detection and segmentation, especially the Deep Learning-based ones, play a fundamental role in scene understanding for correct and safe navigation. Besides that, the wide variety of sensors in vehicles nowadays provides a rich set of alternatives for improvement in the robustness of perception in challenging situations, such as navigation under lighting and weather adverse conditions. Despite the current focus given to the subject, the literature lacks studies on radar-based and radar-camera fusion-based perception. Hence, this work aims to carry out a study on the current scenario of camera and radar-based perception for ADAS and autonomous vehicles. Concepts and characteristics related to both sensors, as well as to their fusion, are presented. Additionally, we give an overview of the Deep Learning-based detection and segmentation tasks, and the main datasets, metrics, challenges, and open questions in vehicle perception.