機械学習モデルと物理モデルの組み合わせは、堅牢なデータ表現を学習するための最近の研究経路です。この論文では、データの変動の真の根本的な要因を部分的に説明する完全な物理モデルを統合する生成モデルである p^3VAE を紹介します。ハイブリッド設計を十分に活用するために、半教師付き最適化手順と、意味のある不確実性の推定に伴う推論スキームを提案します。 p^3VAE を高解像度ハイパースペクトル リモート センシング画像のセマンティック セグメンテーションに適用します。シミュレートされたデータ セットに対する私たちの実験では、外挿機能と解釈可能性の点で、従来の機械学習モデルに対するハイブリッド モデルの利点が実証されました。特に、p^3VAE は本質的にもつれを解く能力が高いことを示しています。私たちのコードとデータは、https://github.com/Romain3Ch216/p3VAE で公開されています。
The combination of machine learning models with physical models is a recent research path to learn robust data representations. In this paper, we introduce p^3VAE, a generative model that integrates a perfect physical model which partially explains the true underlying factors of variation in the data. To fully leverage our hybrid design, we propose a semi-supervised optimization procedure and an inference scheme that comes along meaningful uncertainty estimates. We apply p^3VAE to the semantic segmentation of high-resolution hyperspectral remote sensing images. Our experiments on a simulated data set demonstrated the benefits of our hybrid model against conventional machine learning models in terms of extrapolation capabilities and interpretability. In particular, we show that p^3VAE naturally has high disentanglement capabilities. Our code and data have been made publicly available at https://github.com/Romain3Ch216/p3VAE.