arXiv reaDer
Cost-Sensitive Deep Learning with Layer-Wise Cost Estimation
ディープニューラルネットワークは、オブジェクトの認識、検出、ローカリゼーションなどのいくつかの視覚的アプリケーションで非常に高い分類精度に到達することで成功していますが、実際のアプリケーションの多くは、さまざまなタイプの誤分類エラーに対してさまざまなコストを要求することに注意することが重要です。コストに敏感な分類アルゴリズムが必要です。コストに敏感な分類のためのディープニューラルネットワークの現在のモデルは、いくつかの特定のネットワーク構造と限られた深さに制限されています。この論文では、コストに敏感な分類問題の意味のある表現の学習を容易にするために、任意の構造を持つディープニューラルネットワークに適用できる新しいフレームワークを提案します。さらに、このフレームワークにより、より深いネットワークのエンドツーエンドのトレーニングを直接行うことができます。このフレームワークは、層ごとのコスト見積もりのために各隠れ層の出力に補助ニューロンを追加し、最適化の目的に合計見積もり損失を含めることによって設計されています。 2つのコスト情報設定を使用した公開ベンチマークビジュアルデータセットの実験結果は、提案されたフレームワークが最先端のコストに敏感な深層学習モデルよりも優れていることを示しています。
While deep neural networks have succeeded in several visual applications, such as object recognition, detection, and localization, by reaching very high classification accuracies, it is important to note that many real-world applications demand varying costs for different types of misclassification errors, thus requiring cost-sensitive classification algorithms. Current models of deep neural networks for cost-sensitive classification are restricted to some specific network structures and limited depth. In this paper, we propose a novel framework that can be applied to deep neural networks with any structure to facilitate their learning of meaningful representations for cost-sensitive classification problems. Furthermore, the framework allows end-to-end training of deeper networks directly. The framework is designed by augmenting auxiliary neurons to the output of each hidden layer for layer-wise cost estimation, and including the total estimation loss within the optimization objective. Experimental results on public benchmark visual data sets with two cost information settings demonstrate that the proposed framework outperforms state-of-the-art cost-sensitive deep learning models.
updated: Sat Oct 03 2020 03:10:16 GMT+0000 (UTC)
published: Wed Nov 16 2016 03:31:25 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト