画像再構成は、サンプリングされたセンサー測定に基づいて計算画像を解決する逆問題です。サンプリングがまばらな画像の再構成は、測定が限られているため、追加の課題があります。この作業では、まばらにサンプリングされた測定値から計算画像を再構築するために、事前埋め込み(NeRP)を使用した暗黙的なニューラル表現学習方法を提案します。この方法は、NeRPが以前の画像の内部情報を活用し、まばらにサンプリングされた測定値の物理学を利用して未知の対象の表現を生成するという点で、以前の深層学習ベースの画像再構成アプローチとは根本的に異なります。以前の画像とまばらにサンプリングされた測定値を除いて、NeRPをトレーニングするために大規模なデータは必要ありません。さらに、NeRPがCTやMRIなどのさまざまな画像診断法に一般化する一般的な方法論であることを示します。また、NeRPは、腫瘍の進行を評価するために必要な微妙でありながら重要な画像の変化を確実にキャプチャできることも示しています。
Image reconstruction is an inverse problem that solves for a computational image based on sampled sensor measurement. Sparsely sampled image reconstruction poses addition challenges due to limited measurements. In this work, we propose an implicit Neural Representation learning methodology with Prior embedding (NeRP) to reconstruct a computational image from sparsely sampled measurements. The method differs fundamentally from previous deep learning-based image reconstruction approaches in that NeRP exploits the internal information in an image prior, and the physics of the sparsely sampled measurements to produce a representation of the unknown subject. No large-scale data is required to train the NeRP except for a prior image and sparsely sampled measurements. In addition, we demonstrate that NeRP is a general methodology that generalizes to different imaging modalities such as CT and MRI. We also show that NeRP can robustly capture the subtle yet significant image changes required for assessing tumor progression.