arXiv reaDer
自然画像のトップダウン丁度可知差異推定に向けて
Towards Top-Down Just Noticeable Difference Estimation of Natural Images
丁度可知差異(JND)推定に関する既存の取り組みは、主に、空間領域と周波数領域のさまざまな要因の可視性マスキング効果をモデル化し、それらを全体的なJND推定に融合することに専念しています。ただし、全体的な可視性マスキング効果は、文献で考慮されているものを超えるより多くの要因と関連している可能性があり、個々の要因に対してもマスキング効果を定式化することも十分に正確ではありません。さらに、異なるマスキング効果間の潜在的な相互作用も、単純な融合モデルで特徴付けることは困難です。この作業では、トップダウンの設計哲学でこれらの問題に対処するための劇的に異なる方法に目を向けます。提案されたJND推定モデルは、ボトムアップ方式で複数のマスキング効果を定式化して融合する代わりに、トップダウンの観点からクリティカル知覚ロスレス(CPL)画像を直接生成し、元の画像とCPL画像の差分マップを次のように計算します。最終的なJNDマップ。入力画像が与えられると、知覚無損失画像再構成に使用されるカルーネン・レーベ変換(KLT)のスペクトル成分の最小数として定義される適応臨界点(知覚無損失しきい値)は、KLT係数エネルギーの収束特性を利用して導出されます。次に、CPL画像は、導出された臨界点に従って逆KLTを介して再構成できます。最後に、元の画像とCPL画像の差分マップがJNDマップとして計算されます。提案されたJNDモデルの性能は、JND誘導ノイズ注入とJND誘導画像圧縮を含む2つのアプリケーションで評価されます。実験結果は、提案されたJNDモデルがいくつかの最新のJNDモデルよりも優れたパフォーマンスを達成できることを示しています。
Existing efforts on Just noticeable difference (JND) estimation mainly dedicate to modeling the visibility masking effects of different factors in spatial and frequency domains, and then fusing them into an overall JND estimate. However, the overall visibility masking effect can be related with more contributing factors beyond those have been considered in the literature and it is also insufficiently accurate to formulate the masking effect even for an individual factor. Moreover, the potential interactions among different masking effects are also difficult to be characterized with a simple fusion model. In this work, we turn to a dramatically different way to address these problems with a top-down design philosophy. Instead of formulating and fusing multiple masking effects in a bottom-up way, the proposed JND estimation model directly generates a critical perceptual lossless (CPL) image from a top-down perspective and calculates the difference map between the original image and the CPL image as the final JND map. Given an input image, an adaptively critical point (perceptual lossless threshold), defined as the minimum number of spectral components in Karhunen-Loéve Transform (KLT) used for perceptual lossless image reconstruction, is derived by exploiting the convergence characteristics of KLT coefficient energy. Then, the CPL image can be reconstructed via inverse KLT according to the derived critical point. Finally, the difference map between the original image and the CPL image is calculated as the JND map. The performance of the proposed JND model is evaluated with two applications including JND-guided noise injection and JND-guided image compression. Experimental results have demonstrated that our proposed JND model can achieve better performance than several latest JND models.
updated: Wed Aug 11 2021 06:51:50 GMT+0000 (UTC)
published: Wed Aug 11 2021 06:51:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト