arXiv reaDer
Why are Saliency Maps Noisy? Cause of and Solution to Noisy Saliency Maps
  入力に関するスコア関数の勾配である顕著性マップは、ディープニューラルネットワークの決定を解釈するための最も基本的な手法です。ただし、顕著性マップは視覚的にノイズが多い場合があります。この現象を説明するためにいくつかの仮説が提案されましたが、ノイズの多い顕著性マップの厳密な分析を提供する作品はほとんどありません。この論文では、まず、無関係な特徴がReLUアクティベーション関数を通過するときに、顕著性マップにノイズが発生する可能性があるという新しい仮説を提案します。次に、Rectified Gradientを提案します。これは、バックプロパゲーション中の層ごとのしきい値処理によってこの問題を軽減する方法です。 CIFAR-10およびImageNetでトレーニングされたニューラルネットワークを使用した実験により、本手法の有効性と他の属性手法に対する優位性が示されました。
Saliency Map, the gradient of the score function with respect to the input, is the most basic technique for interpreting deep neural network decisions. However, saliency maps are often visually noisy. Although several hypotheses were proposed to account for this phenomenon, there are few works that provide rigorous analyses of noisy saliency maps. In this paper, we firstly propose a new hypothesis that noise may occur in saliency maps when irrelevant features pass through ReLU activation functions. Then, we propose Rectified Gradient, a method that alleviates this problem through layer-wise thresholding during backpropagation. Experiments with neural networks trained on CIFAR-10 and ImageNet showed effectiveness of our method and its superiority to other attribution methods.
updated: Sat Sep 14 2019 15:55:32 GMT+0000 (UTC)
published: Wed Feb 13 2019 13:25:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト