arXiv reaDer
セマンティックセグメンテーションのコンテキスト説明のためのグリッドの顕著性
Grid Saliency for Context Explanations of Semantic Segmentation
 最近、ネットワーク予測の視覚的説明を提供する顕著性メソッドの開発に関心が高まっています。それでも、既存の方法の有用性は画像分類モデルに限定されています。この制限を克服するために、既存のアプローチを拡張してグリッドの顕著性を生成します。グリッドの顕著性は、(ピクセルレベルの)高密度予測ネットワークの空間的に一貫した視覚的説明を提供します。提案されたグリッドの顕著性により、オブジェクトとそのコンテキストを空間的に解くことができるため、セマンティックセグメンテーションネットワークのコンテキスト説明を生成する可能性を具体的に探り、どのコンテキストがターゲットオブジェクト領域内のクラス予測に最も影響するかを発見します。最先端のセグメンテーションネットワークを使用して、現実世界の都市景観データセットだけでなく、オブジェクトとそのコンテキストの間に人為的に誘導されたバイアスを持つ合成データセットのグリッド顕著性の有効性を調査します。私たちの結果は、グリッドの顕著性を簡単に解釈可能なコンテキストの説明を提供するために使用でき、さらに、データに存在するコンテキストバイアスを検出およびローカライズするために使用できることを示しています。
Recently, there has been a growing interest in developing saliency methods that provide visual explanations of network predictions. Still, the usability of existing methods is limited to image classification models. To overcome this limitation, we extend the existing approaches to generate grid saliencies, which provide spatially coherent visual explanations for (pixel-level) dense prediction networks. As the proposed grid saliency allows to spatially disentangle the object and its context, we specifically explore its potential to produce context explanations for semantic segmentation networks, discovering which context most influences the class predictions inside a target object area. We investigate the effectiveness of grid saliency on a synthetic dataset with an artificially induced bias between objects and their context as well as on the real-world Cityscapes dataset using state-of-the-art segmentation networks. Our results show that grid saliency can be successfully used to provide easily interpretable context explanations and, moreover, can be employed for detecting and localizing contextual biases present in the data.
updated: Thu Nov 07 2019 12:29:44 GMT+0000 (UTC)
published: Tue Jul 30 2019 16:25:52 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト