バックプロパゲーション画像の顕著性は、入力内の個々のピクセルのモデル中心の重要性を推定することにより、モデルの予測を説明することを目的としています。ただし、ネットワーク内の初期のレイヤーのクラス非依存性では、より深いレイヤーの低解像度のアクティブ化マップを使用した顕著性の計算しか許可されないため、画像の顕著性が損なわれます。これを修正すると、正気度の低下につながる可能性があります。外部事前確率を必要とせず、マップの健全性を維持することなく、忠実度の高いバックプロパゲーション顕著性マップを計算する手法であるCAMERASを提案します。私たちの方法は、活性化マップと逆伝播勾配のマルチスケールの蓄積と融合を体系的に実行して、正確な顕著性マップを計算します。正確な画像の顕著性から、さまざまなモデルの入力機能の相対的な重要性の明確化、視覚的に類似したオブジェクトのモデル知覚の正確な識別まで、高解像度マッピングは、ブラックボックスの深い視覚モデルに対する複数の新しい洞察を提供します。論文。また、マップによって識別された正確な領域に焦点を当てることにより、攻撃信号のノルムを大幅に削減することにより、敵対的なセットアップにおける顕著性マップの有用性を示します。私たちの方法はまた、この発展途上の研究の方向性のための新しい評価指標と健全性チェックを刺激します。コードはこちらから入手できますhttps://github.com/VisMIL/CAMERAS
Backpropagation image saliency aims at explaining model predictions by estimating model-centric importance of individual pixels in the input. However, class-insensitivity of the earlier layers in a network only allows saliency computation with low resolution activation maps of the deeper layers, resulting in compromised image saliency. Remedifying this can lead to sanity failures. We propose CAMERAS, a technique to compute high-fidelity backpropagation saliency maps without requiring any external priors and preserving the map sanity. Our method systematically performs multi-scale accumulation and fusion of the activation maps and backpropagated gradients to compute precise saliency maps. From accurate image saliency to articulation of relative importance of input features for different models, and precise discrimination between model perception of visually similar objects, our high-resolution mapping offers multiple novel insights into the black-box deep visual models, which are presented in the paper. We also demonstrate the utility of our saliency maps in adversarial setup by drastically reducing the norm of attack signals by focusing them on the precise regions identified by our maps. Our method also inspires new evaluation metrics and a sanity check for this developing research direction. Code is available here https://github.com/VisMIL/CAMERAS