arXiv reaDer
偽の肺を見分ける: ニューラル拡散モデルを使用した合成医用画像の生成
Spot the fake lungs: Generating Synthetic Medical Images using Neural Diffusion Models
ジェネレーティブ モデルは、医用画像の合成で一般的になりつつあります。最近、ニューラル拡散モデルは、オブジェクトの写真のようにリアルな画像を生成する可能性を示しました。ただし、医療画像を生成する可能性はまだ検討されていません。この作業では、ニューラル拡散モデルを使用した医用画像の合成の可能性を探ります。まず、事前トレーニング済みの DALLE2 モデルを使用して、入力テキスト プロンプトから肺の X 線および CT 画像を生成します。次に、3165 枚の X 線画像を使用して安定した拡散モデルをトレーニングし、合成画像を生成します。 2人の独立した放射線科医が、生成されたデータからランダムに選択されたサンプルを本物、偽物、または不確かであるとラベル付けする定性分析を通じて、合成画像データを評価します。結果は、拡散モデルで生成された画像が、そうでなければ胸部 X 線または CT 画像の特定の病状に非常に固有の特性を変換できることを示しています。モデルを慎重に調整することは、非常に有望な場合があります。私たちの知る限り、これは神経拡散モデルを使用して肺の X 線および CT 画像を生成する最初の試みです。この作品は、医用画像処理のための人工知能に新しい次元を導入することを目的としています。これが新しいトピックであることを考えると、この論文は、研究コミュニティが医用画像合成の拡散モデルの可能性を探求するための紹介と動機付けとして役立ちます。 https://www.kaggle.com/datasets/hazrat/awesomelungs で合成画像を公開しました。
Generative models are becoming popular for the synthesis of medical images. Recently, neural diffusion models have demonstrated the potential to generate photo-realistic images of objects. However, their potential to generate medical images is not explored yet. In this work, we explore the possibilities of synthesis of medical images using neural diffusion models. First, we use a pre-trained DALLE2 model to generate lungs X-Ray and CT images from an input text prompt. Second, we train a stable diffusion model with 3165 X-Ray images and generate synthetic images. We evaluate the synthetic image data through a qualitative analysis where two independent radiologists label randomly chosen samples from the generated data as real, fake, or unsure. Results demonstrate that images generated with the diffusion model can translate characteristics that are otherwise very specific to certain medical conditions in chest X-Ray or CT images. Careful tuning of the model can be very promising. To the best of our knowledge, this is the first attempt to generate lungs X-Ray and CT images using neural diffusion models. This work aims to introduce a new dimension in artificial intelligence for medical imaging. Given that this is a new topic, the paper will serve as an introduction and motivation for the research community to explore the potential of diffusion models for medical image synthesis. We have released the synthetic images on https://www.kaggle.com/datasets/hazrat/awesomelungs.
updated: Wed Nov 02 2022 06:02:55 GMT+0000 (UTC)
published: Wed Nov 02 2022 06:02:55 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト