arXiv reaDer
潜在空間で分離:監視なしの単一画像レイヤー分離
Separate In Latent Space: Unsupervised Single Image Layer Separation
  透明な表面からの反射除去や固有の画像分解など、多くの現実世界の視覚タスクは、単一画像レイヤー分離としてモデル化できます。ただし、この問題は非常に不適切であり、正確に調整され、CNNモデルをトレーニングするためにトリプレットデータを収集するのが困難です。この問題に対処するために、このペーパーでは、トレーニングでグラウンドトゥルースデータのトリプレットを必要としない教師なしの方法を提案します。この方法の中核には、異なる層の潜在空間のデータ分布に関する2つの仮定があり、これに基づいて、新しい監視なしの層分離パイプラインを導き出すことができます。次に、自己監視およびサイクル一貫性の制約などを備えたGANフレームワークに基づいてメソッドを構築できます。実験結果は、合成および実世界のタスクの両方で既存の教師なしメソッドを上回る成功を示しています。このメソッドは、より困難な多層分離タスクを解決する能力も示しています。
Many real world vision tasks, such as reflection removal from a transparent surface and intrinsic image decomposition, can be modeled as single image layer separation. However, this problem is highly ill-posed, requiring accurately aligned and hard to collect triplet data to train the CNN models. To address this problem, this paper proposes an unsupervised method that requires no ground truth data triplet in training. At the core of the method are two assumptions about data distributions in the latent spaces of different layers, based on which a novel unsupervised layer separation pipeline can be derived. Then the method can be constructed based on the GANs framework with self-supervision and cycle consistency constraints, etc. Experimental results demonstrate its successfulness in outperforming existing unsupervised methods in both synthetic and real world tasks. The method also shows its ability to solve a more challenging multi-layer separation task.
updated: Sat Sep 07 2019 07:56:52 GMT+0000 (UTC)
published: Mon Jun 03 2019 12:17:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト