反事実的な説明は、深層学習モデルの解釈可能性を高めるための新たなツールです。サンプルが与えられると、これらのメソッドは、決定境界を越えて同様のサンプルを見つけてユーザーに表示しようとします。この論文では、土地被覆分類タスクのマルチクラス設定における衛星画像時系列に対する生成的敵対的反事実アプローチを提案します。提案されたアプローチの際立った特徴の 1 つは、与えられた反事実的な説明について、対象となるクラスに関する事前の仮定が欠如していることです。この固有の柔軟性により、土地被覆クラス間の関係に関する興味深い情報の発見が可能になります。もう 1 つの特徴は、反事実が小さくてコンパクトな時間的セグメントにおいてのみ元のサンプルと異なるように促すことで構成されます。これらの時間的に連続する摂動により、はるかにまばらな、したがって解釈可能な解決策が可能になります。さらに、生成された反事実の説明のもっともらしさ/現実性は、提案された敵対的学習戦略によって強化されます。
Counterfactual explanations are an emerging tool to enhance interpretability of deep learning models. Given a sample, these methods seek to find and display to the user similar samples across the decision boundary. In this paper, we propose a generative adversarial counterfactual approach for satellite image time series in a multi-class setting for the land cover classification task. One of the distinctive features of the proposed approach is the lack of prior assumption on the targeted class for a given counterfactual explanation. This inherent flexibility allows for the discovery of interesting information on the relationship between land cover classes. The other feature consists of encouraging the counterfactual to differ from the original sample only in a small and compact temporal segment. These time-contiguous perturbations allow for a much sparser and, thus, interpretable solution. Furthermore, plausibility/realism of the generated counterfactual explanations is enforced via the proposed adversarial learning strategy.