arXiv reaDer
深層学習による高さマップ再構成を使用したカラー眼底画像上の黄斑の分析
Analysis of Macula on Color Fundus Images Using Heightmap Reconstruction Through Deep Learning
網膜画像に基づく医療診断では、3D構造の明確な理解が必要になることがよくありますが、キャプチャされた画像の2Dの性質により、その情報を推測することはできません。しかし、3D再構成法を利用することで、眼底画像上で黄斑部の高さ情報を復元することができ、黄斑障害の診断とスクリーニングに役立ちます。最近のアプローチでは、高さマップの予測にシェーディング情報を使用していますが、近くのピクセル間の依存関係を無視し、シェーディング情報のみを使用しているため、出力は正確ではありませんでした。さらに、他の方法は、実際には利用できない網膜の複数の画像の利用可能性に依存していた。この論文では、条件付き生成的敵対的ネットワーク(cGAN)と深く監視されたネットワークの成功に動機付けられて、漸進的な改良と深い監視の使用によって出力の詳細と品質を向上させるジェネレータの新しいアーキテクチャを提案します。カラー眼底画像上の黄斑の高さ情報。私たち自身のデータセットでの比較は、提案された方法が、この特定のタスクでの画像変換および医用画像変換におけるすべての最先端の方法よりも優れていることを示しています。さらに、知覚研究はまた、提案された方法が診断のために眼科医に追加情報を提供できることを示している。
For medical diagnosis based on retinal images, a clear understanding of 3D structure is often required but due to the 2D nature of images captured, we cannot infer that information. However, by utilizing 3D reconstruction methods, we can recover the height information of the macula area on a fundus image which can be helpful for diagnosis and screening of macular disorders. Recent approaches have used shading information for heightmap prediction but their output was not accurate since they ignored the dependency between nearby pixels and only utilized shading information. Additionally, other methods were dependent on the availability of more than one image of the retina which is not available in practice. In this paper, motivated by the success of Conditional Generative Adversarial Networks(cGANs) and deeply supervised networks, we propose a novel architecture for the generator which enhances the details and the quality of output by progressive refinement and the use of deep supervision to reconstruct the height information of macula on a color fundus image. Comparisons on our own dataset illustrate that the proposed method outperforms all of the state-of-the-art methods in image translation and medical image translation on this particular task. Additionally, perceptual studies also indicate that the proposed method can provide additional information for ophthalmologists for diagnosis.
updated: Mon Dec 28 2020 08:21:55 GMT+0000 (UTC)
published: Mon Dec 28 2020 08:21:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト