arXiv reaDer
MUAD: Multiple Uncertainties for Autonomous Driving、複数の不確実性の種類とタスクのベンチマーク
MUAD: Multiple Uncertainties for Autonomous Driving, a benchmark for multiple uncertainty types and tasks
現実世界の自律システムにディープ ニューラル ネットワークを安全に展開するには、不確実性の予測が不可欠です。ただし、不確実性のさまざまな種類と原因を解明することは、特に不確実性の根拠がないため、ほとんどのデータセットにとって簡単ではありません。さらに、さまざまな強度の悪天候がニューラル ネットワークの予測を混乱させる可能性がありますが、それらは通常、公開データセットのトレーニング セットとテスト セットの両方で十分に表現されていません。 、さまざまな悪天候 (夜、霧、雨、雪)、分布外のオブジェクト、セマンティック セグメンテーション、深度推定、オブジェクト、およびインスタンス検出のための注釈を含む 10,413 の現実的な合成画像で構成されます。 MUAD を使用すると、さまざまな不確実性の原因がモデルのパフォーマンスに与える影響をより適切に評価できます。複数のタスクにわたるいくつかのベースライン ディープ ニューラル ネットワークに対するこの影響の徹底的な実験的研究を実施し、データセットをリリースして、研究者が悪条件でアルゴリズムを体系的にベンチマークできるようにします。 MUAD のその他の視覚化とダウンロード リンクは、https://muad-dataset.github.io/ で入手できます。
Predictive uncertainty estimation is essential for safe deployment of Deep Neural Networks in real-world autonomous systems. However, disentangling the different types and sources of uncertainty is non trivial for most datasets, especially since there is no ground truth for uncertainty. In addition, while adverse weather conditions of varying intensities can disrupt neural network predictions, they are usually under-represented in both training and test sets in public datasets.We attempt to mitigate these setbacks and introduce the MUAD dataset (Multiple Uncertainties for Autonomous Driving), consisting of 10,413 realistic synthetic images with diverse adverse weather conditions (night, fog, rain, snow), out-of-distribution objects, and annotations for semantic segmentation, depth estimation, object, and instance detection. MUAD allows to better assess the impact of different sources of uncertainty on model performance. We conduct a thorough experimental study of this impact on several baseline Deep Neural Networks across multiple tasks, and release our dataset to allow researchers to benchmark their algorithm methodically in adverse conditions. More visualizations and the download link for MUAD are available at https://muad-dataset.github.io/.
updated: Fri Oct 07 2022 16:25:51 GMT+0000 (UTC)
published: Wed Mar 02 2022 22:14:12 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト