arXiv reaDer
End-to-end learning of energy-based representations for irregularly-sampled signals and images
  地球観測、医用画像、天体物理学などを含む多数の分野で、利用可能な画像と信号のデータセットには、不規則な時空間サンプリングパターンと大きな欠落データレートが含まれることがよくあります。これらのサンプリングプロパティは、最先端の学習ベース(自動エンコーダー、CNNなど)を適用するために重要であり、利用可能な大規模な観測から完全に恩恵を受け、再構築と同定におけるブレークスルーに到達します。関心のあるプロセス。この論文では、不規則にサンプリングされたデータからの信号、画像、画像シーケンスの表現のエンドツーエンドの学習、つまり、トレーニングデータに欠落データが含まれていた場合について説明します。ベイジアン定式化からの類推から、エネルギーベースの表現を検討します。 2つのエネルギー形式が調査されます。1つは自動エンコーダーから派生したもので、もう1つはギブス事前分布に関連しています。これらのエネルギーベースの表現(または事前分布)の学習段階には、観測制約の下でのエネルギー最小化問題の解決に相当する共同補間問題が含まれます。考慮されたエネルギー形態のニューラルネットワークベースの実装を使用して、不規則にサンプリングされたデータからエンドツーエンドの学習スキームを述べることができます。さまざまなケーススタディ、つまり、多変量時系列、2D画像、画像シーケンスに対する提案された表現の関連性を示します。
For numerous domains, including for instance earth observation, medical imaging, astrophysics,..., available image and signal datasets often involve irregular space-time sampling patterns and large missing data rates. These sampling properties may be critical to apply state-of-the-art learning-based (e.g., auto-encoders, CNNs,...), fully benefit from the available large-scale observations and reach breakthroughs in the reconstruction and identification of processes of interest. In this paper, we address the end-to-end learning of representations of signals, images and image sequences from irregularly-sampled data, i.e. when the training data involved missing data. From an analogy to Bayesian formulation, we consider energy-based representations. Two energy forms are investigated: one derived from auto-encoders and one relating to Gibbs priors. The learning stage of these energy-based representations (or priors) involve a joint interpolation issue, which amounts to solving an energy minimization problem under observation constraints. Using a neural-network-based implementation of the considered energy forms, we can state an end-to-end learning scheme from irregularly-sampled data. We demonstrate the relevance of the proposed representations for different case-studies: namely, multivariate time series, 2D images and image sequences.
updated: Tue Oct 01 2019 17:31:31 GMT+0000 (UTC)
published: Tue Oct 01 2019 17:31:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト