arXiv reaDer
学習画像圧縮のための多参照エントロピーモデル
Multi-Reference Entropy Model for Learned Image Compression
最近、画像圧縮の学習が目覚ましい成果を上げています。潜在表現の分布を正確に推定するエントロピーモデルは、レート歪みのパフォーマンスを高める上で重要な役割を果たします。ほとんどのエントロピー モデルは、1 つの次元で相関関係を捉えます。ただし、潜在的な表現には、チャネルごとのローカルおよびグローバルな空間相関があります。この問題に対処するために、マルチリファレンス エントロピー モデル MEM および MEM+ を提案して、チャネル、ローカル、およびグローバルな空間コンテキストをキャプチャします。潜在表現をスライスに分割します。現在のスライスをデコードするとき、以前にデコードされたスライスをコンテキストとして使用し、以前にデコードされたスライスのアテンション マップを使用して、現在のスライスのグローバル相関を予測します。ローカル コンテキストをキャプチャするには、強化されたチェッカーボード コンテキスト キャプチャを提案して、2 パス デコードを維持しながらパフォーマンスの低下を回避します。 MEM と MEM+ に基づいて、画像圧縮モデル MLIC と MLIC+ を提案します。広範な実験的評価により、当社の MLIC および MLIC+ が最先端のパフォーマンスを達成し、PSNR で測定した場合、VVC よりもコダック データセットで BD レートを 9.77% および 13.09% 削減することが示されました。
Recently, learned image compression has achieved remarkable performance. Entropy model, which accurately estimates the distribution of latent representation, plays an important role in boosting rate distortion performance. Most entropy models capture correlations in one dimension. However, there are channel-wise, local and global spatial correlations in latent representation. To address this issue, we propose multi-reference entropy models MEM and MEM+ to capture channel, local and global spatial contexts. We divide latent representation into slices. When decoding current slice, we use previously decoded slices as contexts and use attention map of previously decoded slice to predict global correlations in current slice. To capture local contexts, we propose enhanced checkerboard context capturing to avoid performance degradation while retaining two-pass decoding. Based on MEM and MEM+, we propose image compression models MLIC and MLIC+. Extensive experimental evaluations have shown that our MLIC and MLIC+ achieve state-of-the-art performance and they reduce BD-rate by 9.77% and 13.09% on Kodak dataset over VVC when measured in PSNR.
updated: Mon Nov 14 2022 11:07:18 GMT+0000 (UTC)
published: Mon Nov 14 2022 11:07:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト