arXiv reaDer
現実的な超音波胎児脳画像合成に向けて
Towards Realistic Ultrasound Fetal Brain Imaging Synthesis
出生前超音波画像診断は、胎児の健康状態を評価するための第一選択のモダリティです。 AI および ML メソッドの医療画像データセットは多様でなければなりません (つまり、診断、疾患、病理学、スキャナー、人口統計など)。ただし、臨床データの量が不十分であること、患者のプライバシー、異常のまれな発生のために、公開されている超音波胎児画像データセットはほとんどありません。一般的な実践、およびデータ収集と検証のための限られた専門家。このようなデータ不足に対処するために、敵対的生成ネットワーク (GAN) ベースのモデル、拡散超解像度 GAN および変換器ベースの GAN を提案し、1 つの公開データセットから胎児の超音波脳面の画像を合成しました。 GANベースの方法は、安定したトレーニング損失で256x256ピクセルサイズの胎児超音波経小脳脳画像平面を生成できることを報告しました。その結果、拡散超解像度GANのFID値が低くなります(エポック10で平均7.04およびFID 5.09)。 Transformer ベースの GAN の FID 値よりも低い (平均 36.02、エポック 60 で 28.93 未満)。この作業の結果は、現実的な高解像度の超音波画像を合成するための GAN ベースの方法の可能性を示しており、他の胎児の脳の平面、解剖学、デバイス、および合成画像を評価するための専門家のプールの必要性を伴う将来の作業につながります。この作業を再現するためのコード、データ、およびその他のリソースは、https://github.com/budai4medtech/midl2023 で入手できます。
Prenatal ultrasound imaging is the first-choice modality to assess fetal health. Medical image datasets for AI and ML methods must be diverse (i.e. diagnoses, diseases, pathologies, scanners, demographics, etc), however there are few public ultrasound fetal imaging datasets due to insufficient amounts of clinical data, patient privacy, rare occurrence of abnormalities in general practice, and limited experts for data collection and validation. To address such data scarcity, we proposed generative adversarial networks (GAN)-based models, diffusion-super-resolution-GAN and transformer-based-GAN, to synthesise images of fetal ultrasound brain planes from one public dataset. We reported that GAN-based methods can generate 256x256 pixel size of fetal ultrasound trans-cerebellum brain image plane with stable training losses, resulting in lower FID values for diffusion-super-resolution-GAN (average 7.04 and lower FID 5.09 at epoch 10) than the FID values of transformer-based-GAN (average 36.02 and lower 28.93 at epoch 60). The results of this work illustrate the potential of GAN-based methods to synthesise realistic high-resolution ultrasound images, leading to future work with other fetal brain planes, anatomies, devices and the need of a pool of experts to evaluate synthesised images. Code, data and other resources to reproduce this work are available at https://github.com/budai4medtech/midl2023.
updated: Sat Apr 08 2023 07:07:20 GMT+0000 (UTC)
published: Sat Apr 08 2023 07:07:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト