arXiv reaDer
GANs for Medical Image Synthesis: An Empirical Study
生成的敵対的ネットワーク(GAN)はますます強力になり、複製するように訓練されたデータセットのコンテンツを模倣する驚異的なフォトリアリスティックな画像を生成します。医用画像の繰り返しのテーマの1つは、GANが現実的なRGB画像を生成するのと同じように、実行可能な医療データの生成にも効果的であるかどうかです。この論文では、医用画像におけるGANの利点を評価するために、マルチGANおよびマルチアプリケーションの研究を実施します。基本的なDCGANからより洗練されたスタイルベースのGANまで、さまざまなGANアーキテクチャを、心臓シネMRI、肝臓CT、RGB網膜画像の3つの医用画像モダリティと臓器でテストしました。 GANは、生成された画像の視力を測定するためにFIDスコアが計算された、よく知られた広く利用されているデータセットでトレーニングされました。さらに、これらの生成された画像でトレーニングされたU-Netのセグメンテーション精度を測定することにより、それらの有用性をテストしました。結果は、GANは、医療画像アプリケーションに適していないものもあれば、はるかに優れているものもあるため、同等にはほど遠いことを示しています。最高のパフォーマンスを発揮するGANは、FID標準によってリアルな外観の医用画像を生成できます。これにより、訓練を受けた専門家を視覚的なチューリングテストでだまし、いくつかの指標に準拠させることができます。ただし、セグメンテーションの結果は、医療データセットの豊富さを完全に再現できるGANがないことを示しています。
Generative Adversarial Networks (GANs) have become increasingly powerful, generating mind-blowing photorealistic images that mimic the content of datasets they were trained to replicate. One recurrent theme in medical imaging is whether GANs can also be effective at generating workable medical data as they are for generating realistic RGB images. In this paper, we perform a multi-GAN and multi-application study to gauge the benefits of GANs in medical imaging. We tested various GAN architectures from basic DCGAN to more sophisticated style-based GANs on three medical imaging modalities and organs namely : cardiac cine-MRI, liver CT and RGB retina images. GANs were trained on well-known and widely utilized datasets from which their FID score were computed to measure the visual acuity of their generated images. We further tested their usefulness by measuring the segmentation accuracy of a U-Net trained on these generated images. Results reveal that GANs are far from being equal as some are ill-suited for medical imaging applications while others are much better off. The top-performing GANs are capable of generating realistic-looking medical images by FID standards that can fool trained experts in a visual Turing test and comply to some metrics. However, segmentation results suggests that no GAN is capable of reproducing the full richness of a medical datasets.
updated: Mon Jul 19 2021 11:51:58 GMT+0000 (UTC)
published: Tue May 11 2021 19:21:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト