敵対的生成ネットワーク (GAN) は、画像の修復で大きな成功を収めていますが、大きな欠落領域への取り組みは依然として困難です。対照的に、自己回帰モデルやノイズ除去拡散モデルなどの反復確率アルゴリズムは、適切な効果を得るために大量のコンピューティング リソースを使用して展開する必要があります。低計算コストで高品質の結果を達成するために、GAN の最適化効率と確率モデルの予測の扱いやすさを組み合わせて、分離された確率モデリングを繰り返し使用する新しいピクセル拡散モデル (PSM) を提示します。その結果、私たちのモデルは、数回の反復で画像全体に有益なピクセルを選択的に広げ、完成の品質と効率を大幅に向上させます。複数のベンチマークで、新しい最先端のパフォーマンスを達成しています。コードは https://github.com/fenglinglwb/PSM で公開されています。
Generative adversarial networks (GANs) have made great success in image inpainting yet still have difficulties tackling large missing regions. In contrast, iterative probabilistic algorithms, such as autoregressive and denoising diffusion models, have to be deployed with massive computing resources for decent effect. To achieve high-quality results with low computational cost, we present a novel pixel spread model (PSM) that iteratively employs decoupled probabilistic modeling, combining the optimization efficiency of GANs with the prediction tractability of probabilistic models. As a result, our model selectively spreads informative pixels throughout the image in a few iterations, largely enhancing the completion quality and efficiency. On multiple benchmarks, we achieve new state-of-the-art performance. Code is released at https://github.com/fenglinglwb/PSM.