arXiv reaDer
マルチドメイン内視鏡画像における膀胱組織分類のための半教師あり GAN
Semi-supervised GAN for Bladder Tissue Classification in Multi-Domain Endoscopic Images
目的: 膀胱腫瘍の経尿道切除術 (TURBT) 手術中の膀胱組織の正確な視覚的分類は、癌の早期診断と治療を改善するために不可欠です。 TURBT 介入中は、病変の検出に白色光イメージング (WLI) および狭帯域イメージング (NBI) 技術が使用されます。各画像技術は、臨床医が癌病変を識別および分類できるようにする多様な視覚情報を提供します。両方のイメージング技術を使用するコンピューター ビジョン法は、内視鏡診断を改善する可能性があります。アノテーションが 1 つのドメイン (この場合は WLI) でのみ利用可能であり、内視鏡画像が対になっていないデータセットに対応する場合、つまり、NBI と WLI の両方のドメインのすべての画像に正確に相当するものがない場合、組織分類の課題に対処します。方法: 3 つの主要なコンポーネントで構成される半驚きの Generative Adversarial Network (GAN) ベースの方法を提案します。対になっていない画像から画像への変換を実行するためのサイクル一貫性 GAN、および多入力学生ネットワーク。提案されたGANによって生成された合成画像の品質を確保するために、専門家の助けを借りて詳細な定量的および定性的分析を行います。結論: 組織分類の提案された方法で得られた全体的な平均分類精度、精度、および再現率は、それぞれ 0.90、0.88、および 0.89 であり、ラベルなしドメイン (NBI) で得られた同じメトリックは、それぞれ 0.92、0.64、および 0.94 です。生成された画像の品質は、専門家を欺くのに十分信頼できます。重要性: この研究は、注釈がマルチドメイン データで制限されている場合に、半教師付き GAN ベースの分類を使用して膀胱組織の分類を改善する可能性を示しています。
Objective: Accurate visual classification of bladder tissue during Trans-Urethral Resection of Bladder Tumor (TURBT) procedures is essential to improve early cancer diagnosis and treatment. During TURBT interventions, White Light Imaging (WLI) and Narrow Band Imaging (NBI) techniques are used for lesion detection. Each imaging technique provides diverse visual information that allows clinicians to identify and classify cancerous lesions. Computer vision methods that use both imaging techniques could improve endoscopic diagnosis. We address the challenge of tissue classification when annotations are available only in one domain, in our case WLI, and the endoscopic images correspond to an unpaired dataset, i.e. there is no exact equivalent for every image in both NBI and WLI domains. Method: We propose a semi-surprised Generative Adversarial Network (GAN)-based method composed of three main components: a teacher network trained on the labeled WLI data; a cycle-consistency GAN to perform unpaired image-to-image translation, and a multi-input student network. To ensure the quality of the synthetic images generated by the proposed GAN we perform a detailed quantitative, and qualitative analysis with the help of specialists. Conclusion: The overall average classification accuracy, precision, and recall obtained with the proposed method for tissue classification are 0.90, 0.88, and 0.89 respectively, while the same metrics obtained in the unlabeled domain (NBI) are 0.92, 0.64, and 0.94 respectively. The quality of the generated images is reliable enough to deceive specialists. Significance: This study shows the potential of using semi-supervised GAN-based classification to improve bladder tissue classification when annotations are limited in multi-domain data.
updated: Wed Dec 21 2022 21:32:36 GMT+0000 (UTC)
published: Wed Dec 21 2022 21:32:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト