arXiv reaDer
Flexible Conditional Image Generation of Missing Data with Learned Mental Maps
  現実の設定では、正確な形態学的評価と診断のために高解像度のボリューム画像を取得できないことがよくあります。臨床診療では、初期診断の意思決定のためにスパースデータ(個々のスライスなど)のみを取得することがよくあります。それにより、医師は、基礎となる3D情報を推定するために、人体の解剖学に関する事前の知識(またはメンタルマップ)に依存します。正確なメンタルマップには長年の解剖学トレーニングが必要です。これは、最初は規範的学習に依存しています。つまり、病理学は除外されています。このホワイトペーパーでは、ベイジアンディープラーニングと環境マッピングを活用して、ゼロからスパースセットのスライスまで、完全なボリューム解剖学的表現を生成します。腹部CTおよび脳MRIを使用したGenerative Query Networks(GQN)およびConditional BRUNOに基づいた概念実証の実装を評価するとともに、胎児イメージングのためのまばらなモーション破損MR収集を含む臨床アプリケーションで評価します。このアプローチでは、3Dグラウンドトゥルースと比較して、SSIMが0.7+、相互相関が0.8+の1〜4個の断層スライスから3Dボリュームを再構築できます。
Real-world settings often do not allow acquisition of high-resolution volumetric images for accurate morphological assessment and diagnostic. In clinical practice it is frequently common to acquire only sparse data (e.g. individual slices) for initial diagnostic decision making. Thereby, physicians rely on their prior knowledge (or mental maps) of the human anatomy to extrapolate the underlying 3D information. Accurate mental maps require years of anatomy training, which in the first instance relies on normative learning, i.e. excluding pathology. In this paper, we leverage Bayesian Deep Learning and environment mapping to generate full volumetric anatomy representations from none to a small, sparse set of slices. We evaluate proof of concept implementations based on Generative Query Networks (GQN) and Conditional BRUNO using abdominal CT and brain MRI as well as in a clinical application involving sparse, motion-corrupted MR acquisition for fetal imaging. Our approach allows to reconstruct 3D volumes from 1 to 4 tomographic slices, with a SSIM of 0.7+ and cross-correlation of 0.8+ compared to the 3D ground truth.
updated: Thu Aug 29 2019 15:53:40 GMT+0000 (UTC)
published: Thu Aug 29 2019 15:53:40 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト