arXiv reaDer
ディープマシンビジョンの丁度可知差異
Just Noticeable Difference for Deep Machine Vision
人間の視覚システム(HVS)の重要な知覚特性として、丁度可知差異(JND)は、画像およびビデオ処理(知覚視覚信号圧縮など)で数十年にわたって研究されてきました。ただし、DMVは多くのマシンビジョンタスクで大きな進歩を遂げましたが、ディープマシンビジョン(DMV)のJNDの存在についてはほとんど調査されていません。このホワイトペーパーでは、最初の試みを行い、DMVにDMV-JNDと呼ばれるJNDがあることを示します。次に、DMVの画像分類タスク用のJNDモデルを提案します。 DMVは、提案されたDMV-JND-NETを使用した教師なし学習によってJNDを生成することにより、平均PSNRがわずか9.56dB(低いほど良い)の歪んだ画像に耐えることができることが発見されました。特に、セマンティックガイドによる冗長性評価戦略は、DMV-JNDの大きさと空間分布を抑制するように設計されています。画像分類に関する実験結果は、深いマシンビジョンのJNDを見つけることに成功したことを示しています。私たちのDMV-JNDは、DMV指向の画像とビデオの圧縮、透かし入れ、品質評価、ディープニューラルネットワークセキュリティなどの可能な方向性を促進します。
As an important perceptual characteristic of the Human Visual System (HVS), the Just Noticeable Difference (JND) has been studied for decades with image and video processing (e.g., perceptual visual signal compression). However, there is little exploration on the existence of JND for the Deep Machine Vision (DMV), although the DMV has made great strides in many machine vision tasks. In this paper, we take an initial attempt, and demonstrate that the DMV has the JND, termed as the DMV-JND. We then propose a JND model for the image classification task in the DMV. It has been discovered that the DMV can tolerate distorted images with average PSNR of only 9.56dB (the lower the better), by generating JND via unsupervised learning with the proposed DMV-JND-NET. In particular, a semantic-guided redundancy assessment strategy is designed to restrain the magnitude and spatial distribution of the DMV-JND. Experimental results on image classification demonstrate that we successfully find the JND for deep machine vision. Our DMV-JND facilitates a possible direction for DMV-oriented image and video compression, watermarking, quality assessment, deep neural network security, and so on.
updated: Fri Jan 07 2022 14:02:08 GMT+0000 (UTC)
published: Tue Feb 16 2021 14:19:35 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト