arXiv reaDer
歪んだ画像復元のための生成的かつ識別的な学習
Generative and Discriminative Learning for Distorted Image Restoration
液化は画像編集の一般的な手法であり、画像の歪みに使用できます。歪みの変動が不確実であるため、液化フィルターによって引き起こされた歪みのある画像を復元することは困難な作業です。効率的な方法で画像を編集するために、歪んだ画像は自動的に復元されることが期待されています。この論文は、歪んだ画像の適切な反りと完成を求めることを特徴とする歪んだ画像の復元を目的としている。既存の方法は、自然現象によって引き起こされる特定の規則的な変形を解決するためのハードウェア支援または幾何学的原理に焦点を当てていますが、このタスクでの人工歪みの不規則性と不確実性を処理することはできません。この問題に対処するために、さまざまな再構成マッピングを学習し、複雑で高次元のデータを表すことができる、ディープニューラルネットワークに基づく新しい生成的かつ識別的な学習方法を提案します。この方法では、タスクを修正段階と改良段階に分解します。第1段階の生成ネットワークは、歪んだ画像から修正された画像へのマッピングを予測します。次に、第2段階の生成ネットワークは、知覚品質をさらに最適化します。このタスクを調査するために利用できるデータセットまたはベンチマークがないため、CelebAデータセットに基づく前方歪みマッピングによってDistorted Face Dataset(DFD)を作成します。提案されたベンチマークとアプリケーションに関する広範な実験的評価は、我々の方法が歪んだ画像復元のための効果的な方法であることを示しています。
Liquify is a common technique for image editing, which can be used for image distortion. Due to the uncertainty in the distortion variation, restoring distorted images caused by liquify filter is a challenging task. To edit images in an efficient way, distorted images are expected to be restored automatically. This paper aims at the distorted image restoration, which is characterized by seeking the appropriate warping and completion of a distorted image. Existing methods focus on the hardware assistance or the geometric principle to solve the specific regular deformation caused by natural phenomena, but they cannot handle the irregularity and uncertainty of artificial distortion in this task. To address this issue, we propose a novel generative and discriminative learning method based on deep neural networks, which can learn various reconstruction mappings and represent complex and high-dimensional data. This method decomposes the task into a rectification stage and a refinement stage. The first stage generative network predicts the mapping from the distorted images to the rectified ones. The second stage generative network then further optimizes the perceptual quality. Since there is no available dataset or benchmark to explore this task, we create a Distorted Face Dataset (DFD) by forward distortion mapping based on CelebA dataset. Extensive experimental evaluation on the proposed benchmark and the application demonstrates that our method is an effective way for distorted image restoration.
updated: Thu Nov 12 2020 14:09:03 GMT+0000 (UTC)
published: Wed Nov 11 2020 14:01:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト