自然な画像マットでは、目標は画像内の前景オブジェクトの不透明度を推定することです。この不透明度は、前景と背景が透明な領域でブレンドされる方法を制御します。近年、深層学習の進歩により、完全に自動化された方法で卓越したパフォーマンスを実現する多くの自然な画像マットアルゴリズムが生まれました。ただし、これらのアルゴリズムのほとんどは、画像からアルファマットを予測するだけであり、高品質のコンポジションを作成するには不十分です。さらに、入力または出力を直接変更する以外の方法で、これらのアルゴリズムを手動で操作することはできません。初期アルファ推定を前提として、画像の前景色と背景色を復元するための後処理方法として使用できる新しいリカレントニューラルネットワークを提案します。私たちの方法は、自然な画像マットの最先端の色推定よりも優れており、私たちの方法の反復的な性質により、ユーザーが優れた色推定につながる候補ソリューションを簡単に変更できることを示しています。
In natural image matting, the goal is to estimate the opacity of the foreground object in the image. This opacity controls the way the foreground and background is blended in transparent regions. In recent years, advances in deep learning have led to many natural image matting algorithms that have achieved outstanding performance in a fully automatic manner. However, most of these algorithms only predict the alpha matte from the image, which is not sufficient to create high-quality compositions. Further, it is not possible to manually interact with these algorithms in any way except by directly changing their input or output. We propose a novel recurrent neural network that can be used as a post-processing method to recover the foreground and background colors of an image, given an initial alpha estimation. Our method outperforms the state-of-the-art in color estimation for natural image matting and show that the recurrent nature of our method allows users to easily change candidate solutions that lead to superior color estimations.