arXiv reaDer
Iterative Augmentation of Visual Evidence for Weakly-Supervised Lesion Localization in Deep Interpretability Frameworks: Application to Color Fundus Images
ディープラーニング(DL)システムの解釈可能性は、得られた予測に対する専門家の信頼を高め、臨床現場での統合を促進するために、医用画像で注目を集めています。視覚的証拠の増強によって医用画像におけるDL分類タスクの解釈可能性を生成するための深い可視化方法を提案します。提案された方法は、画像レベルのラベルのみで訓練された分類器の予測に基づいて、異常を繰り返し明らかにします。各画像について、予測の最初の視覚的証拠が、特定の視覚的帰属手法を使用して抽出されます。これにより、異常の位置を特定し、選択的な修復によって除去します。システムが画像を正常と見なすまで、この手順を繰り返し適用します。これにより、最初は検出されなかったが最終診断のために考慮されるべき、識別力の低い病変を含む、増強された視覚的証拠が得られます。カラー眼底画像における2つの網膜疾患の等級付けにこの方法を適用します:糖尿病性網膜症(DR)と加齢性黄斑変性症(AMD)。生成された視覚的証拠と、さまざまなタイプのDRおよびAMDの異常の弱く監視されたローカリゼーションのパフォーマンスを定性的および定量的に評価します。予測の増強された視覚的証拠が、診断のために専門家によって検討されたバイオマーカーを強調し、最終的なローカリゼーションパフォーマンスを改善することを示します。さまざまな分類タスク、視覚的帰属手法、およびネットワークアーキテクチャに適用した場合、平均して10個の誤検知/画像で平均される感度に関して、画像あたり11.2 +/- 2.0%の相対的な増加が得られます。これにより、提案された方法は、医用画像におけるDL分類器の徹底的な視覚的サポートのための有用なツールになります。
Interpretability of deep learning (DL) systems is gaining attention in medical imaging to increase experts' trust in the obtained predictions and facilitate their integration in clinical settings. We propose a deep visualization method to generate interpretability of DL classification tasks in medical imaging by means of visual evidence augmentation. The proposed method iteratively unveils abnormalities based on the prediction of a classifier trained only with image-level labels. For each image, initial visual evidence of the prediction is extracted with a given visual attribution technique. This provides localization of abnormalities that are then removed through selective inpainting. We iteratively apply this procedure until the system considers the image as normal. This yields augmented visual evidence, including less discriminative lesions which were not detected at first but should be considered for final diagnosis. We apply the method to grading of two retinal diseases in color fundus images: diabetic retinopathy (DR) and age-related macular degeneration (AMD). We evaluate the generated visual evidence and the performance of weakly-supervised localization of different types of DR and AMD abnormalities, both qualitatively and quantitatively. We show that the augmented visual evidence of the predictions highlights the biomarkers considered by experts for diagnosis and improves the final localization performance. It results in a relative increase of 11.2+/-2.0% per image regarding sensitivity averaged at 10 false positives/image on average, when applied to different classification tasks, visual attribution techniques and network architectures. This makes the proposed method a useful tool for exhaustive visual support of DL classifiers in medical imaging.
updated: Tue Feb 01 2022 14:09:12 GMT+0000 (UTC)
published: Wed Oct 16 2019 14:30:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト