人間は、特に動的な道路イベントとその進化を理解することを必要とする全体的な方法で運転します。したがって、自動運転車にこれらの機能を導入することで、状況認識と意思決定を人間レベルのパフォーマンスに近づけることができます。この目的のために、自動運転のためのROadイベントAwareness Dataset(ROAD)を、この種の最初の知識として紹介します。 ROADは、アクティブエージェントによって構成されるトリプレット、実行するアクション、および対応するシーンの場所として定義される、道路イベントを検出する自律型車両の機能をテストするように設計されています。 ROADは、各道路イベントの画像平面内の位置を示すバウンディングボックスで注釈が付けられたOxfordRobotCarデータセットからのビデオで構成されています。さまざまな検出タスクのベンチマークを行い、ベースラインとして3D-RetinaNetと呼ばれるオンライン道路イベント認識用の新しいインクリメンタルアルゴリズムを提案します。また、SlowfastおよびYOLOv5検出器のROADタスクのパフォーマンスと、自動運転の状況認識が直面する課題を強調するICCV2021ROADチャレンジの勝者のパフォーマンスについても報告します。 ROADは、学者が複雑な(道路)活動の検出、将来のイベントの予測、継続的な学習などの刺激的なタスクを調査できるように設計されています。データセットはhttps://github.com/gurkirt/road-datasetで入手できます。ベースラインはhttps://github.com/gurkirt/3D-RetinaNetにあります。
Humans drive in a holistic fashion which entails, in particular, understanding dynamic road events and their evolution. Injecting these capabilities in autonomous vehicles can thus take situational awareness and decision making closer to human-level performance. To this purpose, we introduce the ROad event Awareness Dataset (ROAD) for Autonomous Driving, to our knowledge the first of its kind. ROAD is designed to test an autonomous vehicle's ability to detect road events, defined as triplets composed by an active agent, the action(s) it performs and the corresponding scene locations. ROAD comprises videos originally from the Oxford RobotCar Dataset annotated with bounding boxes showing the location in the image plane of each road event. We benchmark various detection tasks, proposing as a baseline a new incremental algorithm for online road event awareness termed 3D-RetinaNet. We also report the performance on the ROAD tasks of Slowfast and YOLOv5 detectors, as well as that of the winners of the ICCV2021 ROAD challenge, which highlight the challenges faced by situation awareness in autonomous driving. ROAD is designed to allow scholars to investigate exciting tasks such as complex (road) activity detection, future event anticipation and continual learning. The dataset is available at https://github.com/gurkirt/road-dataset; the baseline can be found at https://github.com/gurkirt/3D-RetinaNet.