arXiv reaDer
自己監視型CycleGANによる知覚一貫性超音波画像超解像
Perception Consistency Ultrasound Image Super-resolution via Self-supervised CycleGAN
センサー、伝送媒体、および超音波の固有の特性の制限により、超音波イメージングの品質、特にその低い空間分解能は常に理想的とは限りません。この状況を改善するために、強力な近似機能により、超音波画像の超解像(SR)用の深層学習ネットワークが最近開発されました。ただし、ほとんどの現在の教師ありSR法は、医用画像サンプルが常にまれであり、通常、実際には低解像度(LR)と高解像度(HR)のトレーニングペアがないため、超音波医用画像には適していません。この作業では、自己監視とサイクル生成敵対的ネットワーク(CycleGAN)に基づいて、LR超音波データのみを必要とし、の再縮退画像を保証できる新しい知覚一貫性超音波画像超解像(SR)法を提案します。生成されたSRは、元のLRイメージと一致します。その逆も同様です。まず、画像強調によりテスト超音波LR画像のHR父とLR息子を生成し、次にLR-SR-LRとHR-LR-SRのサイクル損失と弁別器の敵対的特性を最大限に活用して促進します。より良い知覚的に一貫したSR結果を生成するジェネレータ。ベンチマークCCA-USおよびCCA-USデータセットの下でのPSNR / IFC / SSIM、推論効率、および視覚効果の評価は、提案されたアプローチが効果的であり、他の最先端の方法よりも優れていることを示しています。
Due to the limitations of sensors, the transmission medium and the intrinsic properties of ultrasound, the quality of ultrasound imaging is always not ideal, especially its low spatial resolution. To remedy this situation, deep learning networks have been recently developed for ultrasound image super-resolution (SR) because of the powerful approximation capability. However, most current supervised SR methods are not suitable for ultrasound medical images because the medical image samples are always rare, and usually, there are no low-resolution (LR) and high-resolution (HR) training pairs in reality. In this work, based on self-supervision and cycle generative adversarial network (CycleGAN), we propose a new perception consistency ultrasound image super-resolution (SR) method, which only requires the LR ultrasound data and can ensure the re-degenerated image of the generated SR one to be consistent with the original LR image, and vice versa. We first generate the HR fathers and the LR sons of the test ultrasound LR image through image enhancement, and then make full use of the cycle loss of LR-SR-LR and HR-LR-SR and the adversarial characteristics of the discriminator to promote the generator to produce better perceptually consistent SR results. The evaluation of PSNR/IFC/SSIM, inference efficiency and visual effects under the benchmark CCA-US and CCA-US datasets illustrate our proposed approach is effective and superior to other state-of-the-art methods.
updated: Mon Dec 28 2020 08:24:04 GMT+0000 (UTC)
published: Mon Dec 28 2020 08:24:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト