人間は、特に道路の出来事とその進化を理解することを伴う全体論的な方法で運転にアプローチします。したがって、自動運転車にこれらの機能を注入することで、状況認識と意思決定を人間レベルのパフォーマンスに近づける可能性があります。この目的のために、自動運転のためのROadイベント認識データセット(ROAD)を、この種の最初の知識として紹介します。 ROADは、自動運転車が道路イベントを検出する能力をテストするように設計されています。これは、移動するエージェント、実行するアクション、および対応するシーンの場所によって構成されるトリプレットとして定義されます。 ROADは、オックスフォードRobotCarデータセットからの22本のビデオで構成され、各道路イベントの画像平面内の位置を示す境界ボックスで注釈が付けられています。また、ベースラインとして、RetinaNetを時間とともに膨らませることに基づいて、オンライン道路イベント認識のための新しい増分アルゴリズムを提供します。これにより、フレームレベルおよびビデオレベルのイベント検出でそれぞれ16.8%および6.1%の平均精度が50%で達成されます。オーバーラップ。これらの数字は有望ですが、自動運転における状況認識が直面する課題を浮き彫りにしています。最後に、ROADを使用すると、学者は、複雑な(道路)活動の検出、将来の道路イベントの予測、精神状態の観点からの知覚力のある道路エージェントのモデリングなどの刺激的なタスクを調査できます。データセットはhttps://github.com/gurkirt/road-datasetから取得でき、ベースラインコードはhttps://github.com/gurkirt/3D-RetinaNetから取得できます。
Humans approach driving in a holistic fashion which entails, in particular, understanding road events and their evolution. Injecting these capabilities in an autonomous vehicle has thus the potential to take situational awareness and decision making closer to human-level performance. To this purpose, we introduce the ROad event Awareness Dataset (ROAD) for Autonomous Driving, to our knowledge the first of its kind. ROAD is designed to test an autonomous vehicle's ability to detect road events, defined as triplets composed by a moving agent, the action(s) it performs and the corresponding scene locations. ROAD comprises 22 videos, originally from the Oxford RobotCar Dataset, annotated with bounding boxes showing the location in the image plane of each road event. We also provide as baseline a new incremental algorithm for online road event awareness, based on inflating RetinaNet along time, which achieves a mean average precision of 16.8% and 6.1% for frame-level and video-level event detection, respectively, at 50% overlap. Though promising, these figures highlight the challenges faced by situation awareness in autonomous driving. Finally, ROAD allows scholars to investigate exciting tasks such as complex (road) activity detection, future road event anticipation and the modelling of sentient road agents in terms of mental states. Dataset can be obtained from https://github.com/gurkirt/road-dataset and baseline code from https://github.com/gurkirt/3D-RetinaNet.