arXiv reaDer
A Differential Approach for Gaze Estimation
 非侵襲的視線推定法は、通常、単一の顔または目の画像から視線方向を直接回帰します。ただし、個人間での目の形状および内側の目の構造の重要な変動により、普遍的なモデルは限られた精度しか得られず、その出力は通常、被験者に依存するバイアスと同様に高い分散を示します。したがって、通常、精度を高めるにはキャリブレーションを行い、被験者の視線予測を実際の視線にマッピングできるようにします。この論文では、視線推定のための新しい画像微分法を紹介します。微分畳み込みニューラルネットワークを直接訓練して、同じ被験者の2つの目の入力画像間の視線の差を予測することを提案します。次に、被験者固有のキャリブレーション画像のセットが与えられると、推定された差異を使用して、新しい眼のサンプルの視線方向を予測できます。 2つの目の画像を比較できるようにすることで、通常は単一の画像予測方法を悩ませる迷惑要因(アライメント、まぶたの閉じ方、照明の摂動)を大幅に削減し、予測を改善できます。 3つのパブリックデータセットの実験により、1つのキャリブレーションサンプルのみを使用する場合、または後者の方法の後に被験者固有の視線適応が行われる場合でも、常に最新の方法よりも優れたアプローチが検証されます。
Non-invasive gaze estimation methods usually regress gaze directions directly from a single face or eye image. However, due to important variabilities in eye shapes and inner eye structures amongst individuals, universal models obtain limited accuracies and their output usually exhibit high variance as well as biases which are subject dependent. Therefore, increasing accuracy is usually done through calibration, allowing gaze predictions for a subject to be mapped to his/her actual gaze. In this paper, we introduce a novel image differential method for gaze estimation. We propose to directly train a differential convolutional neural network to predict the gaze differences between two eye input images of the same subject. Then, given a set of subject specific calibration images, we can use the inferred differences to predict the gaze direction of a novel eye sample. The assumption is that by allowing the comparison between two eye images, annoyance factors (alignment, eyelid closing, illumination perturbations) which usually plague single image prediction methods can be much reduced, allowing better prediction altogether. Experiments on 3 public datasets validate our approach which constantly outperforms state-of-the-art methods even when using only one calibration sample or when the latter methods are followed by subject specific gaze adaptation.
updated: Thu Feb 06 2020 11:52:11 GMT+0000 (UTC)
published: Sat Apr 20 2019 15:17:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト