arXiv reaDer
自然画像のトップダウン丁度可知差異推定に向けて
Towards Top-Down Just Noticeable Difference Estimation of Natural Images
自然画像の丁度可知差異(JND)は、一般的な人間の視覚系(HVS)が認識できない最大ピクセル強度変化の大きさを指します。 JND推定に関する既存の取り組みは、主に、空間ドメインまたは周波数ドメインのいずれか/両方で多様なマスキング効果をモデル化し、それらを全体的なJND推定に融合することに専念しています。この作業では、トップダウンの設計哲学でこの問題に対処するための劇的に異なる方法に目を向けます。提案されたJND推定モデルは、ボトムアップ方式でさまざまなマスキング効果を明示的に定式化して融合するのではなく、最初に元の画像のクリティカルな知覚ロスレス(CPL)の対応物を予測し、次に元の画像と予測された画像の差分マップを計算することに専念します。 JNDマップとしてのCPLイメージ。 500枚の画像の臨界点を決定するために主観的な実験を行い、これらの臨界点での500枚の画像すべてにわたる累積正規化KLT係数エネルギー値の分布がワイブル分布によって十分に特徴付けられることを発見します。テスト画像が与えられると、それに対応する臨界点は、重みが近似ワイブル分布関数によって決定される単純な加重平均スキームによって決定されます。提案されたJNDモデルのパフォーマンスは、直接JND予測を使用して明示的に評価され、JNDガイド付きノイズ注入とJNDガイド付き画像圧縮を含む2つのアプリケーションを使用して暗黙的に評価されます。実験結果は、提案されたJNDモデルがいくつかの最新のJNDモデルよりも優れたパフォーマンスを達成できることを示しています。さらに、提案されたJNDモデルを、歪みの検出と識別の機能の観点から、既存の視覚的差異予測(VDP)メトリックと比較します。結果は、JNDモデルもこのタスクで良好なパフォーマンスを示していることを示しています。
Just noticeable difference (JND) of natural images refers to the maximum pixel intensity change magnitude that typical human visual system (HVS) cannot perceive. Existing efforts on JND estimation mainly dedicate to modeling the diverse masking effects in either/both spatial or/and frequency domains, and then fusing them into an overall JND estimate. In this work, we turn to a dramatically different way to address this problem with a top-down design philosophy. Instead of explicitly formulating and fusing different masking effects in a bottom-up way, the proposed JND estimation model dedicates to first predicting a critical perceptual lossless (CPL) counterpart of the original image and then calculating the difference map between the original image and the predicted CPL image as the JND map. We conduct subjective experiments to determine the critical points of 500 images and find that the distribution of cumulative normalized KLT coefficient energy values over all 500 images at these critical points can be well characterized by a Weibull distribution. Given a testing image, its corresponding critical point is determined by a simple weighted average scheme where the weights are determined by a fitted Weibull distribution function. The performance of the proposed JND model is evaluated explicitly with direct JND prediction and implicitly with two applications including JND-guided noise injection and JND-guided image compression. Experimental results have demonstrated that our proposed JND model can achieve better performance than several latest JND models. In addition, we also compare the proposed JND model with existing visual difference predicator (VDP) metrics in terms of the capability in distortion detection and discrimination. The results indicate that our JND model also has a good performance in this task.
updated: Tue May 24 2022 05:29:34 GMT+0000 (UTC)
published: Wed Aug 11 2021 06:51:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト