arXiv reaDer
ディープイメージブレンディング
Deep Image Blending
  画像合成は、視覚的なコンテンツを作成するための重要な操作です。画像合成タスクの中で、画像ブレンディングの目的は、ソース画像のオブジェクトをターゲット画像にシームレスにブレンドすることです。人気のあるアプローチは、ポアソン画像ブレンディングです。これは、合成画像の勾配領域の滑らかさを強制します。ただし、この方法ではターゲット画像の境界ピクセルのみが考慮されるため、ターゲット画像のテクスチャに適応できません。さらに、ターゲットイメージの色が元のソースオブジェクトを透過しすぎて、ソースオブジェクトのコンテンツが大幅に失われることがよくあります。ポアソン画像ブレンディングと同じ目的を達成するポアソンブレンディング損失を提案します。さらに、提案されたポアソン混合損失と、ディープネットワークから計算されたスタイルおよびコンテンツ損失を共同で最適化し、L-BFGSソルバーを使用してピクセルを繰り返し更新することで混合領域を再構築します。ブレンド画像では、ブレンド境界の勾配領域を滑らかにするだけでなく、ブレンド領域に一貫したテクスチャを追加します。ユーザーの調査によると、私たちの方法は、絵画と実世界の画像の両方にオブジェクトを配置する際に、強力なベースラインと最先端のアプローチより優れています。
Image composition is an important operation to create visual content. Among image composition tasks, image blending aims to seamlessly blend an object from a source image onto a target image with lightly mask adjustment. A popular approach is Poisson image blending, which enforces the gradient domain smoothness in the composite image. However, this approach only considers the boundary pixels of target image, and thus can not adapt to texture of target image. In addition, the colors of the target image often seep through the original source object too much causing a significant loss of content of the source object. We propose a Poisson blending loss that achieves the same purpose of Poisson image blending. In addition, we jointly optimize the proposed Poisson blending loss as well as the style and content loss computed from a deep network, and reconstruct the blending region by iteratively updating the pixels using the L-BFGS solver. In the blending image, we not only smooth out gradient domain of the blending boundary but also add consistent texture into the blending region. User studies show that our method outperforms strong baselines as well as state-of-the-art approaches when placing objects onto both paintings and real-world images.
updated: Fri Oct 25 2019 02:23:36 GMT+0000 (UTC)
published: Fri Oct 25 2019 02:23:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト