arXiv reaDer
CTフィルム写真からの医用画像の復元
Recovering medical images from CT film photos
コンピュータ断層撮影(CT)などの医用画像は病院のPACSにDICOM形式で保存されますが、多くの国では、セルフストレージや二次相談の目的で転送可能な媒体としてフィルムを印刷することは依然として非常に日常的です。また、携帯電話のカメラが普及しているため、CTフィルムの写真を撮るのは非常に一般的ですが、残念ながら幾何学的な変形や照明の変化に悩まされています。この研究では、文献で最初の試みであるCTフィルムを私たちの知る限りで回収する問題を研究します。まず、広く使用されているコンピューターグラフィックソフトウェアBlenderを使用して、約20,000枚の写真で構成される大規模なヘッドCTフィルムデータベースCTFilm20Kを構築します。また、幾何学的変形(3D座標、深度、法線、UVマップなど)および照明の変化(アルベドマップなど)に関連するすべての付随情報も記録します。次に、フィルム画像回復ネットワーク(FIReNet)と呼ばれる深いフレームワークを提案し、CTフィルムから抽出された複数のマップを使用して幾何学的変形と照明の変化に取り組み、回復プロセスを共同でガイドします。最後に、ラジオミクス特徴抽出などのさらなる分析のために、カスケードモデルを使用して歪み補正された画像をDICOMファイルに変換します。広範な実験は、以前のアプローチに対する私たちのアプローチの優位性を示しています。 CTフィルム画像解析の研究を推進するために、シミュレーション画像とディープモデルをオープンソース化する予定です。
While medical images such as computed tomography (CT) are stored in DICOM format in hospital PACS, it is still quite routine in many countries to print a film as a transferable medium for the purposes of self-storage and secondary consultation. Also, with the ubiquitousness of mobile phone cameras, it is quite common to take pictures of CT films, which unfortunately suffer from geometric deformation and illumination variation. In this work, we study the problem of recovering a CT film, which marks the first attempt in the literature, to the best of our knowledge. We start with building a large-scale head CT film database CTFilm20K, consisting of approximately 20,000 pictures, using the widely used computer graphics software Blender. We also record all accompanying information related to the geometric deformation (such as 3D coordinate, depth, normal, and UV maps) and illumination variation (such as albedo map). Then we propose a deep framework called Film Image Recovery Network (FIReNet) to tackle geometric deformation and illumination variation using the multiple maps extracted from the CT films to collaboratively guide the recovery process. Finally, we convert the dewarped images to DICOM files with our cascade model for further analysis such as radiomics feature extraction. Extensive experiments demonstrate the superiority of our approach over the previous approaches. We plan to open source the simulated images and deep models for promoting the research on CT film image analysis.
updated: Thu Mar 10 2022 03:36:17 GMT+0000 (UTC)
published: Thu Mar 10 2022 03:36:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト