arXiv reaDer
医用画像超解像のための微調整された敵対的生成ネットワークベースのモデル
Fine-tuned Generative Adversarial Network-based Model for Medical Images Super-Resolution
医用画像解析では、低解像度の画像は医用画像の解釈のパフォーマンスに悪影響を及ぼし、誤診を引き起こす可能性があります。単一画像超解像 (SISR) メソッドは、医療画像の解像度と品質を向上させることができます。現在、Generative Adversarial Networks (GAN) ベースの超解像モデルは非常に優れたパフォーマンスを示しています。 Real-Enhanced Super-Resolution Generative Adversarial Network (Real-ESRGAN) は、一般的な画像超解像の分野で広く使用されている実用的な GAN ベースのモデルの 1 つです。医用画像の超解像における課題の 1 つは、自然画像とは異なり、医用画像は空間解像度が高くないことです。この問題を解決するには、転移学習手法を使用して、外部データセット (多くの場合、自然なデータセット) でトレーニングされたモデルを微調整します。提案されたアプローチでは、Real-ESRGAN モデルの事前トレーニング済みのジェネレーターおよびディスクリミネーター ネットワークが、医用画像データセットを使用して微調整されます。この論文では、胸部 X 線画像と網膜画像に取り組み、網膜画像の STARE データセットと結核胸部 X 線 (深セン) データセットを微調整に使用しました。提案されたモデルは、より正確で自然なテクスチャを生成し、その出力は、元の Real-ESRGAN 出力と比較して、詳細と解像度が向上しています。
In medical image analysis, low-resolution images negatively affect the performance of medical image interpretation and may cause misdiagnosis. Single image super-resolution (SISR) methods can improve the resolution and quality of medical images. Currently, Generative Adversarial Networks (GAN) based super-resolution models have shown very good performance. Real-Enhanced Super-Resolution Generative Adversarial Network (Real-ESRGAN) is one of the practical GAN-based models which is widely used in the field of general image super-resolution. One of the challenges in medical image super-resolution is that, unlike natural images, medical images do not have high spatial resolution. To solve this problem, we can use transfer learning technique and fine-tune the model that has been trained on external datasets (often natural datasets). In our proposed approach, the pre-trained generator and discriminator networks of the Real-ESRGAN model are fine-tuned using medical image datasets. In this paper, we worked on chest X-ray and retinal images and used the STARE dataset of retinal images and Tuberculosis Chest X-rays (Shenzhen) dataset for fine-tuning. The proposed model produces more accurate and natural textures, and its outputs have better details and resolution compared to the original Real-ESRGAN outputs.
updated: Thu Nov 10 2022 09:29:57 GMT+0000 (UTC)
published: Tue Nov 01 2022 16:48:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト