arXiv reaDer
Single Image Reflection Removal through Cascaded Refinement
 ガラスの表面を通してキャプチャされた単一の画像から望ましくない反射を取り除くという問題に対処します。ソーシャルネットワークでの隠されたコミュニティ検出のための反復構造削減に触発されて、反射除去のカスケード予測を可能にする反復ブースト畳み込みLSTMネットワーク(IBCLN)を提案します。 IBCLNはカスケード型ネットワークであり、透過層と反射層の推定値を繰り返し改良して、予測品質を相互に高め、LSTMを使用してカスケードのステップ間で情報を転送します。直感は、透過が強く支配的な構造であるのに対し、反射は弱い隠れた構造であるということです。それらは単一の画像で相互に補完し合うため、元の画像からの一方の側でのより良い推定と削減は、他方の側でのより正確な推定につながります。複数のカスケードステップでのトレーニングを容易にするために、LSTMを使用して消失勾配問題に対処し、トレーニングのガイダンスとして残留再構成損失を提案します。さらに、データが不十分であるという問題を軽減するために、反射層とグラウンドトゥルース透過層を含む実際の画像のデータセットを作成します。包括的な実験は、提案された方法が、最新の反射除去方法と比較して、実際の画像と合成画像の反射を効果的に除去できることを示しています。
We address the problem of removing undesirable reflections from a single image captured through a glass surface, which is an ill-posed, challenging but practically important problem for photo enhancement. Inspired by iterative structure reduction for hidden community detection in social networks, we propose an Iterative Boost Convolutional LSTM Network (IBCLN) that enables cascaded prediction for reflection removal. IBCLN is a cascaded network that iteratively refines the estimates of transmission and reflection layers in a manner that they can boost the prediction quality to each other, and information across steps of the cascade is transferred using an LSTM. The intuition is that the transmission is the strong, dominant structure while the reflection is the weak, hidden structure. They are complementary to each other in a single image and thus a better estimate and reduction on one side from the original image leads to a more accurate estimate on the other side. To facilitate training over multiple cascade steps, we employ LSTM to address the vanishing gradient problem, and propose residual reconstruction loss as further training guidance. Besides, we create a dataset of real-world images with reflection and ground-truth transmission layers to mitigate the problem of insufficient data. Comprehensive experiments demonstrate that the proposed method can effectively remove reflections in real and synthetic images compared with state-of-the-art reflection removal methods.
updated: Sun Apr 05 2020 07:04:01 GMT+0000 (UTC)
published: Fri Nov 15 2019 13:52:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト