入力レベルで得られた特徴アトリビューション マップは通常、モデルの予測されたセグメンテーション マスクまたはバウンディング ボックスに似ているため、従来の事後アトリビューション メソッドをセグメンテーションまたはオブジェクト検出予測子に適用しても、限られた洞察しか得られません。この作業では、推論中にモデルによって学習、認識、使用される関連する概念を自動的に識別して視覚化する説明を生成するためのポストホックな説明可能な人工知能手法 L-CRP を提案することにより、これらの予測因子のより有益な説明の必要性に対処します。入力スペースに正確に配置します。したがって、私たちの方法は、特異な入力レベルのアトリビューション マップを超えており、最近公開された Concept Relevance Propagation 手法に基づくアプローチとして、DeepLabV3+ などのセグメンテーションとオブジェクト検出における最先端のブラック ボックス アーキテクチャに効率的に適用できます。 YOLOv6 などがあります。さまざまな概念帰属方法を定量的に比較することにより、提案された手法の忠実性を検証し、CityScapes、Pascal VOC、MS COCO 2017 などの一般的なデータセットでの説明の複雑さへの影響について説明します。概念を正確に見つけて伝達する能力を使用して、概念を明らかにし、バックグラウンド機能の使用を検証し、モデルのバイアスの可能性を強調します。
Applying traditional post-hoc attribution methods to segmentation or object detection predictors offers only limited insights, as the obtained feature attribution maps at input level typically resemble the models' predicted segmentation mask or bounding box. In this work, we address the need for more informative explanations for these predictors by proposing the post-hoc eXplainable Artificial Intelligence method L-CRP to generate explanations that automatically identify and visualize relevant concepts learned, recognized and used by the model during inference as well as precisely locate them in input space. Our method therefore goes beyond singular input-level attribution maps and, as an approach based on the recently published Concept Relevance Propagation technique, is efficiently applicable to state-of-the-art black-box architectures in segmentation and object detection, such as DeepLabV3+ and YOLOv6, among others. We verify the faithfulness of our proposed technique by quantitatively comparing different concept attribution methods, and discuss the effect on explanation complexity on popular datasets such as CityScapes, Pascal VOC and MS COCO 2017. The ability to precisely locate and communicate concepts is used to reveal and verify the use of background features, thereby highlighting possible biases of the model.