arXiv reaDer
Wasserstein生成的敵対的生成ネットワークを使用した画像修復
Image Inpainting Using Wasserstein Generative Adversarial Imputation Network
画像の修復は、画像内の欠落した領域の再構築に焦点を当てたコンピュータビジョンの重要なタスクの1つです。この論文の目的は、Wasserstein Generative Adversarial ImputationNetworkに基づく画像修復モデルを紹介することです。モデルのジェネレータネットワークは、モデルが出力の詳細を再現するのに役立つスキップ接続とともに、さまざまな拡張率の畳み込み層のビルディングブロックを使用します。この組み合わせにより、欠落のさまざまなシナリオを十分な品質で処理できるユニバーサル代入モデルが生成されます。これを実験的に示すために、モデルは、ランダムに欠落したピクセル、さまざまな小さな正方形領域の欠落、および画像の中央に配置された1つの欠落した正方形によって与えられる3つのシナリオを処理するように同時にトレーニングされます。私たちのモデルは、すべてのシナリオで高品質の修復結果を達成していることがわかりました。パフォーマンスは、2つの実際のベンチマークデータセットであるCelebAfacesとParisStreetViewのピーク信号対雑音比と構造的類似性インデックスを使用して評価されます。私たちのモデルの結果は、重調和代入および他の最先端の画像修復方法のいくつかと比較されます。
Image inpainting is one of the important tasks in computer vision which focuses on the reconstruction of missing regions in an image. The aim of this paper is to introduce an image inpainting model based on Wasserstein Generative Adversarial Imputation Network. The generator network of the model uses building blocks of convolutional layers with different dilation rates, together with skip connections that help the model reproduce fine details of the output. This combination yields a universal imputation model that is able to handle various scenarios of missingness with sufficient quality. To show this experimentally, the model is simultaneously trained to deal with three scenarios given by missing pixels at random, missing various smaller square regions, and one missing square placed in the center of the image. It turns out that our model achieves high-quality inpainting results on all scenarios. Performance is evaluated using peak signal-to-noise ratio and structural similarity index on two real-world benchmark datasets, CelebA faces and Paris StreetView. The results of our model are compared to biharmonic imputation and to some of the other state-of-the-art image inpainting methods.
updated: Wed Jun 23 2021 05:55:07 GMT+0000 (UTC)
published: Wed Jun 23 2021 05:55:07 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト