arXiv reaDer
Understanding Individual Decisions of CNNs via Contrastive Backpropagation
  深い畳み込みニューラルネットワークの個々の決定をよりよく理解するために、DeConvNets、vanilla Gradient Visualization、Guided Backpropagationなどの逆伝播ベースのアプローチが多数提案されています。それらによって生成された顕著性マップは、無差別であることが証明されています。最近、整流器ニューラルネットワークの分類決定を説明するために、レイヤー単位の関連性伝播(LRP)アプローチが提案されました。この作業では、生成された説明の識別性を評価し、LRPの理論的基礎、つまりディープテイラー分解を分析します。実験と分析により、LRPによって生成された説明はクラス差別的ではないと結論付けられます。 LRPに基づいて、インスタンス固有、クラス識別、ピクセル単位の説明を生成できるContrastive Layer-wise Relevance Propagation(CLRP)を提案します。実験では、CLRPを使用して決定を説明し、個々の分類決定におけるニューロン間の違いを理解します。また、ポインティングゲームとアブレーションの研究により、説明を定量的に評価します。定性的および定量的評価の両方から、CLRPはLRPよりも優れた説明を生成することがわかります。コードが利用可能です。
A number of backpropagation-based approaches such as DeConvNets, vanilla Gradient Visualization and Guided Backpropagation have been proposed to better understand individual decisions of deep convolutional neural networks. The saliency maps produced by them are proven to be non-discriminative. Recently, the Layer-wise Relevance Propagation (LRP) approach was proposed to explain the classification decisions of rectifier neural networks. In this work, we evaluate the discriminativeness of the generated explanations and analyze the theoretical foundation of LRP, i.e. Deep Taylor Decomposition. The experiments and analysis conclude that the explanations generated by LRP are not class-discriminative. Based on LRP, we propose Contrastive Layer-wise Relevance Propagation (CLRP), which is capable of producing instance-specific, class-discriminative, pixel-wise explanations. In the experiments, we use the CLRP to explain the decisions and understand the difference between neurons in individual classification decisions. We also evaluate the explanations quantitatively with a Pointing Game and an ablation study. Both qualitative and quantitative evaluations show that the CLRP generates better explanations than the LRP. The code is available.
updated: Tue Sep 03 2019 00:16:47 GMT+0000 (UTC)
published: Wed Dec 05 2018 16:43:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト