深層学習分類子は、光コヒーレンストモグラフィー (OCT) とその血管造影 (OCTA) に基づいて、糖尿病性網膜症 (DR) を自動的に診断する最も正確な手段を提供します。これらのモデルの能力は、目的のタスクを達成するために必要な複雑さを提供する隠れ層が含まれていることに部分的に起因しています。ただし、隠れ層は、アルゴリズムの出力を解釈することも困難にします。ここでは、臨床医が分類子の意思決定を検証および理解できるようにする、敵対的生成学習に基づく新しいバイオマーカー活性化マップ (BAM) フレームワークを紹介します。 456 の黄斑スキャンを含むデータ セットは、現在の臨床基準に基づいて、参照不可または参照可能 DR として分類されました。 BAM の評価に使用された DR 分類子は、最初にこのデータセットに基づいてトレーニングされました。 BAM 生成フレームワークは、この分類器に意味のある解釈を提供するために、2 つの U 字型ジェネレーターを組み合わせることによって設計されました。メイン ジェネレーターは、参照可能なスキャンを入力として受け取り、分類器によって非参照として分類される出力を生成するようにトレーニングされました。 BAM は、メイン ジェネレーターの出力と入力の間の差分画像として構築されます。 BAM が分類器を利用したバイオマーカーのみを強調表示するようにするために、アシスタント ジェネレーターは逆のことを行うようにトレーニングされ、参照不可能なスキャンから分類器によって参照可能として分類されるスキャンを生成します。生成された BAM は、非灌流領域や網膜液などの既知の病理学的特徴を強調しました。これらのハイライトに基づく完全に解釈可能な分類子は、臨床医が自動化された DR 診断をより適切に利用および検証するのに役立ちます。
Deep learning classifiers provide the most accurate means of automatically diagnosing diabetic retinopathy (DR) based on optical coherence tomography (OCT) and its angiography (OCTA). The power of these models is attributable in part to the inclusion of hidden layers that provide the complexity required to achieve a desired task. However, hidden layers also render algorithm outputs difficult to interpret. Here we introduce a novel biomarker activation map (BAM) framework based on generative adversarial learning that allows clinicians to verify and understand classifiers decision-making. A data set including 456 macular scans were graded as non-referable or referable DR based on current clinical standards. A DR classifier that was used to evaluate our BAM was first trained based on this data set. The BAM generation framework was designed by combing two U-shaped generators to provide meaningful interpretability to this classifier. The main generator was trained to take referable scans as input and produce an output that would be classified by the classifier as non-referable. The BAM is then constructed as the difference image between the output and input of the main generator. To ensure that the BAM only highlights classifier-utilized biomarkers an assistant generator was trained to do the opposite, producing scans that would be classified as referable by the classifier from non-referable scans. The generated BAMs highlighted known pathologic features including nonperfusion area and retinal fluid. A fully interpretable classifier based on these highlights could help clinicians better utilize and verify automated DR diagnosis.