arXiv reaDer
Reveal to Revise: ディープ モデルの反復バイアス修正のための説明可能な AI ライフ サイクル
Reveal to Revise: An Explainable AI Life Cycle for Iterative Bias Correction of Deep Models
最先端の機械学習モデルは、多くの場合、トレーニング データに埋め込まれた疑似相関を学習します。これは、皮膚がん検出などの医療アプリケーションなど、リスクの高い意思決定のためにこれらのモデルを展開する際にリスクをもたらします。この問題に取り組むために、Reveal to Revise (R2R) を提案します。これは、eXplainable Artificial Intelligence (XAI) ライフサイクル全体を含むフレームワークであり、実践者が最小限の量で偽のモデルの動作を繰り返し識別、軽減、および (再) 評価できるようにします。人的交流。最初のステップ (1) では、R2R は、属性の外れ値を見つけるか、モデルによって学習された潜在的な概念を検査することによって、モデルの弱点を明らかにします。次に (2)、原因となるアーティファクトが検出され、入力データ内で空間的にローカライズされます。これは、(3) モデルの動作を修正するために活用されます。具体的には、RRR、CDEP、および ClArC の手法をモデル修正に適用し、(4) モデルのパフォーマンスとアーティファクトに対する残りの感度を (再) 評価します。黒色腫の検出と骨年齢の推定に 2 つの医療ベンチマーク データセットを使用して、R2R フレームワークを VGG、ResNet、および EfficientNet アーキテクチャに適用し、それによって実際のデータセット固有のアーティファクトと、制御された設定での合成バリアントを明らかにして修正します。 XAI ライフ サイクルを完了すると、複数の R2R の反復を示して、さまざまなバイアスを軽減します。コードは https://github.com/maxdreyer/Reveal2Revise で入手できます。
State-of-the-art machine learning models often learn spurious correlations embedded in the training data. This poses risks when deploying these models for high-stake decision-making, such as in medical applications like skin cancer detection. To tackle this problem, we propose Reveal to Revise (R2R), a framework entailing the entire eXplainable Artificial Intelligence (XAI) life cycle, enabling practitioners to iteratively identify, mitigate, and (re-)evaluate spurious model behavior with a minimal amount of human interaction. In the first step (1), R2R reveals model weaknesses by finding outliers in attributions or through inspection of latent concepts learned by the model. Secondly (2), the responsible artifacts are detected and spatially localized in the input data, which is then leveraged to (3) revise the model behavior. Concretely, we apply the methods of RRR, CDEP and ClArC for model correction, and (4) (re-)evaluate the model's performance and remaining sensitivity towards the artifact. Using two medical benchmark datasets for Melanoma detection and bone age estimation, we apply our R2R framework to VGG, ResNet and EfficientNet architectures and thereby reveal and correct real dataset-intrinsic artifacts, as well as synthetic variants in a controlled setting. Completing the XAI life cycle, we demonstrate multiple R2R iterations to mitigate different biases. Code is available on https://github.com/maxdreyer/Reveal2Revise.
updated: Mon Mar 27 2023 07:43:17 GMT+0000 (UTC)
published: Wed Mar 22 2023 15:23:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト