arXiv reaDer
スクート:顔のスケッチの知覚指標
Scoot: A Perceptual Metric for Facial Sketches
  人間の視覚システムには、2つの顔のスケッチ間の知覚的な類似性をすばやく評価する強力な機能があります。ただし、既存の2つの広く使用されている顔のスケッチメトリック、たとえばFSIMとSSIMは、この分野におけるこの知覚的な類似性に対処できません。顔のモデリング領域における最近の研究により、構造とテクスチャの両方を含めることは、顔スケッチ合成(FSS)に大きなプラスの利点があることが確認されています。しかし、どの統計がより重要であり、それらの成功に役立ちますか?この論文では、ブロックレベルの空間構造と共起テクスチャ統計を同時に考慮する構造共起テクスチャ(Scoot)と呼ばれる知覚メトリックを設計します。メトリックの品質をテストするために、さまざまな信頼できるプロパティに基づいた3つの新しいメタメジャーを提案します。広範な実験により、Scootメトリックが以前の作業のパフォーマンスを上回ることが実証されています。さらに、メトリックが人間の知覚とどれだけ一致しているかを評価できる最初の大規模(152k判定)人間の知覚に基づくスケッチデータベースを構築しました。私たちの結果は、「空間構造」と「共起テクスチャ」が、顔スケッチ合成で一般的に適用される2つの知覚的特徴であることを示唆しています。
Human visual system has the strong ability to quick assess the perceptual similarity between two facial sketches. However, existing two widely-used facial sketch metrics, e.g., FSIM and SSIM fail to address this perceptual similarity in this field. Recent study in facial modeling area has verified that the inclusion of both structure and texture has a significant positive benefit for face sketch synthesis (FSS). But which statistics are more important, and are helpful for their success? In this paper, we design a perceptual metric,called Structure Co-Occurrence Texture (Scoot), which simultaneously considers the block-level spatial structure and co-occurrence texture statistics. To test the quality of metrics, we propose three novel meta-measures based on various reliable properties. Extensive experiments demonstrate that our Scoot metric exceeds the performance of prior work. Besides, we built the first large scale (152k judgments) human-perception-based sketch database that can evaluate how well a metric is consistent with human perception. Our results suggest that "spatial structure" and "co-occurrence texture" are two generally applicable perceptual features in face sketch synthesis.
updated: Wed Sep 04 2019 06:06:31 GMT+0000 (UTC)
published: Wed Aug 21 2019 11:55:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト