arXiv reaDer
IICNet:リバーシブル画像変換のための汎用フレームワーク
IICNet: A Generic Framework for Reversible Image Conversion
リバーシブル画像変換(RIC)は、特定のビジュアルコンテンツ(短いビデオなど)と埋め込み画像の間でリバーシブルな変換を構築することを目的としています。この場合、必要に応じて元のコンテンツを埋め込みから復元できます。この作業では、その強力な容量とタスクに依存しない設計により、さまざまなRICタスクの汎用ソリューションとしてInvertible Image Conversion Net(IICNet)を開発します。以前のエンコーダ-デコーダベースの方法とは異なり、IICNetは、変換中の情報をより適切に保存するために、可逆ニューラルネットワーク(INN)に基づく高度に可逆な構造を維持します。リレーションモジュールとチャネルスクイーズレイヤーを使用してINNの非線形性を改善し、それぞれクロスイメージリレーションとネットワークの柔軟性を抽出します。実験結果は、IICNetが既存のRICタスクで特別に設計された方法よりも優れており、新しく探索されたさまざまなタスクにうまく一般化できることを示しています。汎用のIICNetを使用すると、急速に発生するビジュアルコンテンツのために、タスク固有の埋め込みネットワークを手動で設計する必要がなくなります。ソースコードはhttps://github.com/felixcheng97/IICNetで入手できます。
Reversible image conversion (RIC) aims to build a reversible transformation between specific visual content (e.g., short videos) and an embedding image, where the original content can be restored from the embedding when necessary. This work develops Invertible Image Conversion Net (IICNet) as a generic solution to various RIC tasks due to its strong capacity and task-independent design. Unlike previous encoder-decoder based methods, IICNet maintains a highly invertible structure based on invertible neural networks (INNs) to better preserve the information during conversion. We use a relation module and a channel squeeze layer to improve the INN nonlinearity to extract cross-image relations and the network flexibility, respectively. Experimental results demonstrate that IICNet outperforms the specifically-designed methods on existing RIC tasks and can generalize well to various newly-explored tasks. With our generic IICNet, we no longer need to hand-engineer task-specific embedding networks for rapidly occurring visual content. Our source codes are available at: https://github.com/felixcheng97/IICNet.
updated: Thu Sep 09 2021 13:06:59 GMT+0000 (UTC)
published: Thu Sep 09 2021 13:06:59 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト