arXiv reaDer
DUAL-GLOW: Conditional Flow-Based Generative Model for Modality Transfer
ポジトロン放射断層撮影(PET)イメージングは、多くの神経疾患を診断するためのイメージングモダリティです。磁気共鳴画像法(MRI)とは対照的に、PETは高価であり、放射性物質を患者に注入する必要があります。視覚におけるモダリティ転送の開発に動機付けられ、MRIデータから特定のタイプのPET画像の生成を研究しています。新しいフローベースの生成モデルを導出し、この小さなサンプルサイズのレジームで良好に機能することを示します(標準のビジョンタスクで利用可能なデータセットサイズよりもはるかに小さい)。私たちの定式化であるDUAL-GLOWは、2つの可逆ネットワークと、潜在空間を相互にマッピングする関係ネットワークに基づいています。事前分布が与えられ、MRI画像が与えられた場合のPETの条件付き分布を学習することで、2つの潜在コードw.r.t間の条件付き分布を取得する方法を説明します。 2つの画像タイプ。また、フレームワークを拡張して、利用可能な場合に「サイド」情報(または属性)を活用します。年齢の「コンディショニング」を通じてPET生成を制御することにより、我々のモデルは、年齢の関数として脳FDG-PET(代謝低下)の変化を捕捉することもできます。 826人の被験者を含むアルツハイマー病ニューロイメージングイニシアチブ(ADNI)データセットに関する実験を提示し、最近の研究よりも定性的および定量的に優れたPET画像合成で優れたパフォーマンスを獲得します。
Positron emission tomography (PET) imaging is an imaging modality for diagnosing a number of neurological diseases. In contrast to Magnetic Resonance Imaging (MRI), PET is costly and involves injecting a radioactive substance into the patient. Motivated by developments in modality transfer in vision, we study the generation of certain types of PET images from MRI data. We derive new flow-based generative models which we show perform well in this small sample size regime (much smaller than dataset sizes available in standard vision tasks). Our formulation, DUAL-GLOW, is based on two invertible networks and a relation network that maps the latent spaces to each other. We discuss how given the prior distribution, learning the conditional distribution of PET given the MRI image reduces to obtaining the conditional distribution between the two latent codes w.r.t. the two image types. We also extend our framework to leverage 'side' information (or attributes) when available. By controlling the PET generation through 'conditioning' on age, our model is also able to capture brain FDG-PET (hypometabolism) changes, as a function of age. We present experiments on the Alzheimers Disease Neuroimaging Initiative (ADNI) dataset with 826 subjects, and obtain good performance in PET image synthesis, qualitatively and quantitatively better than recent works.
updated: Wed Aug 21 2019 18:14:09 GMT+0000 (UTC)
published: Wed Aug 21 2019 18:14:09 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト