arXiv reaDer
NU-AIR -- 歩行者と車両の検出と位置特定のためのニューロモルフィック都市航空データセット
NU-AIR -- A Neuromorphic Urban Aerial Dataset for Detection and Localization of Pedestrians and Vehicles
都市環境で歩行者と車両をキャプチャした注釈付き画像を使用して、マシン ビジョン タスク用のニューラル ネットワーク (NN) をトレーニングできます。この論文は、都市環境で移動する歩行者と車両をキャプチャする最初のオープンソースの空中ニューロモーフィック データセットを提示します。 NU-AIR というタイトルのデータセットは、都市環境で動作するクアッドローターに取り付けられた解像度 640 x 480 のニューロモルフィック センサーで取得された 70.75 分のイベント映像を特徴としています。歩行者の群れ、さまざまな種類の車両、交通量の多い都会の交差点のストリート シーンが、さまざまな標高や照明条件でキャプチャされます。記録に含まれる車両と歩行者の手動バウンディング ボックス アノテーションが 30 Hz の周波数で提供され、合計で 93,204 のラベルが生成されます。データセットの忠実度の評価は、3 つのスパイキング ニューラル ネットワーク (SNN) と 10 のディープ ニューラル ネットワーク (DNN) をトレーニングすることによって実行されます。テスト セットの評価で達成された平均精度 (mAP) 精度の結果は、確立されたニューロモルフィック ベンチマーク データセットで同様の SNN および DNN について報告された結果と同等です。データをボクセル化し、その後 SNN/DNN をトレーニングするためのすべてのデータと Python コードは、オープンソース化されています。
Annotated imagery capturing pedestrians and vehicles in an urban environment can be used to train Neural Networks (NNs) for machine vision tasks. This paper presents the first open-source aerial neuromorphic dataset that captures pedestrians and vehicles moving in an urban environment. The dataset, titled NU-AIR, features 70.75 minutes of event footage acquired with a 640 x 480 resolution neuromorphic sensor mounted on a quadrotor operating in an urban environment. Crowds of pedestrians, different types of vehicles, and street scenes at a busy urban intersection are captured at different elevations and illumination conditions. Manual bounding box annotations of vehicles and pedestrians contained in the recordings are provided at a frequency of 30 Hz, yielding 93,204 labels in total. Evaluation of the dataset's fidelity is performed by training three Spiking Neural Networks (SNNs) and ten Deep Neural Networks (DNNs). The mean average precision (mAP) accuracy results achieved for the testing set evaluations are on-par with results reported for similar SNNs and DNNs on established neuromorphic benchmark datasets. All data and Python code to voxelize the data and subsequently train SNNs/DNNs has been open-sourced.
updated: Sat Feb 18 2023 21:48:18 GMT+0000 (UTC)
published: Sat Feb 18 2023 21:48:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト