arXiv reaDer
スマートフォンの写真の知覚的な色の違いを測定する
Measuring Perceptual Color Differences of Smartphone Photographs
知覚色差 (CD) の測定は、現代のスマートフォンの写真撮影において非常に重要です。長い歴史にもかかわらず、ほとんどの CD 測定は、均質なカラー パッチまたは限られた数の単純な自然写真画像の心理物理学的データによって制約されてきました。したがって、既存の CD 対策が、より複雑なコンテンツと学習ベースの画像信号プロセッサを特徴とするスマートフォン写真の時代に一般化されるかどうかは疑問です。このホワイト ペーパーでは、これまでのところ最大の知覚 CD 評価用の画像データセットをまとめました。写真画像は、1) 6 台の主力スマートフォンでキャプチャされ、2) Photoshop で変更され、3) 内蔵フィルターで後処理されたものです。スマートフォン、および 4) 不適切なカラー プロファイルで再現されています。次に、大規模な心理物理実験を実施して、慎重に制御された実験室環境で 30,000 の画像ペアの知覚 CD を収集します。新しく確立されたデータセットに基づいて、以前のいくつかのメトリックの一般化として、軽量ニューラル ネットワークに基づいてエンド ツー エンドの学習可能な CD 式を構築する最初の試みの 1 つを行います。広範な実験により、最適化された数式が既存の 33 の CD 測定値よりも大幅に優れていること、密な監視を使用せずに合理的なローカル CD マップを提供すること、均質なカラー パッチ データにうまく一般化すること、および数学的な意味で適切なメトリックとして経験的に動作することが実証されています。私たちのデータセットとコードは、https://github.com/hellooks/CDNet で公開されています。
Measuring perceptual color differences (CDs) is of great importance in modern smartphone photography. Despite the long history, most CD measures have been constrained by psychophysical data of homogeneous color patches or a limited number of simplistic natural photographic images. It is thus questionable whether existing CD measures generalize in the age of smartphone photography characterized by greater content complexities and learning-based image signal processors. In this paper, we put together so far the largest image dataset for perceptual CD assessment, in which the photographic images are 1) captured by six flagship smartphones, 2) altered by Photoshop, 3) post-processed by built-in filters of the smartphones, and 4) reproduced with incorrect color profiles. We then conduct a large-scale psychophysical experiment to gather perceptual CDs of 30,000 image pairs in a carefully controlled laboratory environment. Based on the newly established dataset, we make one of the first attempts to construct an end-to-end learnable CD formula based on a lightweight neural network, as a generalization of several previous metrics. Extensive experiments demonstrate that the optimized formula outperforms 33 existing CD measures by a large margin, offers reasonable local CD maps without the use of dense supervision, generalizes well to homogeneous color patch data, and empirically behaves as a proper metric in the mathematical sense. Our dataset and code are publicly available at https://github.com/hellooks/CDNet.
updated: Fri Mar 31 2023 15:07:28 GMT+0000 (UTC)
published: Thu May 26 2022 16:57:04 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト