arXiv reaDer
A General Framework for Uncertainty Estimation in Deep Learning
 入力サンプルがトレーニング分布から外れている場合、またはノイズによって破損している場合、ニューラルネットワークの予測は信頼できません。このような障害を自動的に検出できることは、ディープラーニングアルゴリズムをロボット工学に統合するための基本です。ニューラルネットワークの不確実性推定の現在のアプローチでは、ネットワークと最適化プロセスを変更する必要があり、通常はデータに関する事前の知識を無視し、不確実性を過小評価する過度に単純化した仮定を行う傾向があります。これらの制限に対処するために、不確実性推定のための新しいフレームワークを提案します。ベイズの信念ネットワークとモンテカルロサンプリングに基づいて、私たちのフレームワークは予測の不確実性のさまざまなソースを完全にモデル化するだけでなく、以前のデータ情報、たとえばセンサーノイズ。理論的には、これにより、既存の方法よりも不確実性を捉えることができます。さらに、このフレームワークにはいくつかの望ましい特性があります。(i)ネットワークアーキテクチャとタスクに依存しない。 (ii)最適化プロセスの変更は必要ありません。 (iii)既に訓練されたアーキテクチャに適用できます。コンピュータービジョンと制御タスクの両方に関する広範な実験を通じて、提案されたフレームワークを徹底的に検証し、最大23%の精度で以前の方法よりも優れています。
Neural networks predictions are unreliable when the input sample is out of the training distribution or corrupted by noise. Being able to detect such failures automatically is fundamental to integrate deep learning algorithms into robotics. Current approaches for uncertainty estimation of neural networks require changes to the network and optimization process, typically ignore prior knowledge about the data, and tend to make over-simplifying assumptions which underestimate uncertainty. To address these limitations, we propose a novel framework for uncertainty estimation. Based on Bayesian belief networks and Monte-Carlo sampling, our framework not only fully models the different sources of prediction uncertainty, but also incorporates prior data information, e.g. sensor noise. We show theoretically that this gives us the ability to capture uncertainty better than existing methods. In addition, our framework has several desirable properties: (i) it is agnostic to the network architecture and task; (ii) it does not require changes in the optimization process; (iii) it can be applied to already trained architectures. We thoroughly validate the proposed framework through extensive experiments on both computer vision and control tasks, where we outperform previous methods by up to 23% in accuracy.
updated: Fri Feb 07 2020 12:10:56 GMT+0000 (UTC)
published: Tue Jul 16 2019 08:46:03 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト