arXiv reaDer
連続画像表現による高密度のピクセル間調和
Dense Pixel-to-Pixel Harmonization via Continuous Image Representation
高解像度 (HR) 画像の調和は、画像合成や画像編集などの実際のアプリケーションで非常に重要です。ただし、メモリ コストが高いため、既存の高密度のピクセル間調和手法は、主に低解像度 (LR) 画像の処理に重点を置いています。最近の作品の中には、色から色への変換との組み合わせに頼るものがありますが、特定の解像度に制限されているか、手作りの画像フィルターに大きく依存しています。この作業では、暗黙的ニューラル表現 (INR) の活用を探り、暗黙的ニューラル ネットワーク (HINet) に基づく新しい画像調和法を提案します。手作りのフィルター設計のない HR 画像。 Retinex 理論に着想を得て、MLP を 2 つの部分に分離し、合成画像のコンテンツと環境をそれぞれキャプチャします。 Low-Resolution Image Prior (LRIP) ネットワークは、境界の不一致の問題を軽減するように設計されており、トレーニングと推論プロセスの新しい設計も提案しています。広範な実験により、最先端の方法と比較して、私たちの方法の有効性が実証されています。さらに、提案された方法のいくつかの興味深い実用的なアプリケーションが調査されます。コードは https://github.com/WindVChen/INR-Harmonization で入手できます。
High-resolution (HR) image harmonization is of great significance in real-world applications such as image synthesis and image editing. However, due to the high memory costs, existing dense pixel-to-pixel harmonization methods are mainly focusing on processing low-resolution (LR) images. Some recent works resort to combining with color-to-color transformations but are either limited to certain resolutions or heavily depend on hand-crafted image filters. In this work, we explore leveraging the implicit neural representation (INR) and propose a novel image Harmonization method based on Implicit neural Networks (HINet), which to the best of our knowledge, is the first dense pixel-to-pixel method applicable to HR images without any hand-crafted filter design. Inspired by the Retinex theory, we decouple the MLPs into two parts to respectively capture the content and environment of composite images. A Low-Resolution Image Prior (LRIP) network is designed to alleviate the Boundary Inconsistency problem, and we also propose new designs for the training and inference process. Extensive experiments have demonstrated the effectiveness of our method compared with state-of-the-art methods. Furthermore, some interesting and practical applications of the proposed method are explored. Our code will be available at https://github.com/WindVChen/INR-Harmonization.
updated: Fri Mar 03 2023 02:52:28 GMT+0000 (UTC)
published: Fri Mar 03 2023 02:52:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト