深層学習の失敗例は、特に医療分野で豊富です。分布外の一般化に関する最近の研究は、適切に制御された合成データセットで大幅に進歩しましたが、それらは医療画像のコンテキストを表していません。成果物アノテーションに依存するパイプラインを提案して、困難な皮膚病変分析コンテキストの一般化評価とバイアス緩和を可能にします。まず、一般化評価を向上させるために、データをますますバイアスの高いトレーニング セットとテスト セットのレベルに分割します。次に、皮膚病変のアーティファクトに基づいて環境を作成し、ドメインの一般化方法を有効にします。最後に、堅牢なトレーニングの後、テスト時のバイアス緩和手順を実行し、推論画像の偽の特徴を減らします。私たちの実験では、パイプラインが偏ったケースでパフォーマンス メトリックを改善し、説明メソッドを使用するときにアーティファクトを回避することが示されています。それでも、分布外のデータでそのようなモデルを評価するとき、彼らは臨床的に意味のある機能を好まなかった.代わりに、トレーニングから同様のアーティファクトを提示するテスト セットでのみパフォーマンスが向上し、モデルが既知のアーティファクト セットを無視することを学習したことが示唆されました。私たちの結果は、モデルを単一の側面に向けてバイアスを緩和するだけでは、公正な皮膚病変分析には不十分である可能性があるという懸念を引き起こします。
Deep Learning failure cases are abundant, particularly in the medical area. Recent studies in out-of-distribution generalization have advanced considerably on well-controlled synthetic datasets, but they do not represent medical imaging contexts. We propose a pipeline that relies on artifacts annotation to enable generalization evaluation and debiasing for the challenging skin lesion analysis context. First, we partition the data into levels of increasingly higher biased training and test sets for better generalization assessment. Then, we create environments based on skin lesion artifacts to enable domain generalization methods. Finally, after robust training, we perform a test-time debiasing procedure, reducing spurious features in inference images. Our experiments show our pipeline improves performance metrics in biased cases, and avoids artifacts when using explanation methods. Still, when evaluating such models in out-of-distribution data, they did not prefer clinically-meaningful features. Instead, performance only improved in test sets that present similar artifacts from training, suggesting models learned to ignore the known set of artifacts. Our results raise a concern that debiasing models towards a single aspect may not be enough for fair skin lesion analysis.