arXiv reaDer
Testing DNN Image Classifiers for Confusion & Bias Errors
 画像分類器は、消費者およびビジネスアプリケーションから安全重視のドメインまで、今日のソフトウェアの重要なコンポーネントです。ディープニューラルネットワーク(DNN)の出現は、このような広範な成功の背後にある重要な触媒です。ただし、繊細で重大な状況下でいくつかの重大な誤った動作が報告されているため、画像の分類に関してDNNに依存するソフトウェアシステムの堅牢性に関する深刻な懸念が広く採用されています。開発者は、ソフトウェアのイメージ分類子を厳密にテストし、受け入れられるまで展開を遅らせる必要があると主張します。クラスプロパティ違反に基づいて画像分類器の堅牢性をテストする方法を示します。人気のあるDNN画像分類器で報告された多くの誤ったケースは、訓練されたモデルが1つのクラスを他のクラスと混同したり、他のクラスよりもいくつかのクラスに偏りを示すために発生することがわかりました。これらのバグは通常、これらのクラスの1つまたは複数のクラスプロパティに違反します。ほとんどのDNNテスト手法は、イメージごとの違反に焦点を当てているため、クラスレベルの混乱またはバイアスを検出できません。 DNN駆動の画像分類ソフトウェアでクラスベースの混乱とバイアスエラーを自動的に検出するテスト手法を開発しました。混乱エラーについては最大100%(平均約72.6%)、バイアスエラーについては最大84.3%(平均約66.8%)の精度で、いくつかの一般的な画像分類器での実装DeepInspectを評価しました。 DeepInspectは、広く使用されているモデルで数百の分類ミスを発見しました。多くは、混乱やバイアスを示すエラーを明らかにしています。
Image classifiers are an important component of today's software, from consumer and business applications to safety-critical domains. The advent of Deep Neural Networks (DNNs) is the key catalyst behind such wide-spread success. However, wide adoption comes with serious concerns about the robustness of software systems dependent on DNNs for image classification, as several severe erroneous behaviors have been reported under sensitive and critical circumstances. We argue that developers need to rigorously test their software's image classifiers and delay deployment until acceptable. We present an approach to testing image classifier robustness based on class property violations. We found that many of the reported erroneous cases in popular DNN image classifiers occur because the trained models confuse one class with another or show biases towards some classes over others. These bugs usually violate some class properties of one or more of those classes. Most DNN testing techniques focus on per-image violations, so fail to detect class-level confusions or biases. We developed a testing technique to automatically detect class-based confusion and bias errors in DNN-driven image classification software. We evaluated our implementation, DeepInspect, on several popular image classifiers with precision up to 100% (avg.~72.6%) for confusion errors, and up to 84.3% (avg.~66.8%) for bias errors. DeepInspect found hundreds of classification mistakes in widely-used models, many exposing errors indicating confusion or bias.
updated: Tue Feb 11 2020 19:32:09 GMT+0000 (UTC)
published: Mon May 20 2019 00:00:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト