医療画像分析モデルの解釈可能性は、重要な研究分野と見なされています。 5人の放射線科医からの視線追跡データのデータセットを使用して、解釈可能性手法の出力と放射線科医がどこを見たかを表すヒートマップを比較します。文献から選択された2つの方法によって生成された顕著性マップのクラスに依存しない分析を実行します:Grad-CAMと注意ゲートモデルからの注意マップ。比較のために、固定位置からのバイアスを回避するシャッフルされたメトリックを使用します。 1つのシャッフルされたメトリックで観察者間のベースラインに匹敵するスコアを達成し、画像に対する放射線科医の注意を模倣するGrad-CAMからの顕著性マップの可能性を強調します。また、データセットをサブセットに分割して、類似性が高い場合を評価します。
The interpretability of medical image analysis models is considered a key research field. We use a dataset of eye-tracking data from five radiologists to compare the outputs of interpretability methods and the heatmaps representing where radiologists looked. We conduct a class-independent analysis of the saliency maps generated by two methods selected from the literature: Grad-CAM and attention maps from an attention-gated model. For the comparison, we use shuffled metrics, which avoid biases from fixation locations. We achieve scores comparable to an interobserver baseline in one shuffled metric, highlighting the potential of saliency maps from Grad-CAM to mimic a radiologist's attention over an image. We also divide the dataset into subsets to evaluate in which cases similarities are higher.