arXiv reaDer
LNSMM:ローカルネットワーク共有マルチビューマルチタスクによる視線推定
LNSMM: Eye Gaze Estimation With Local Network Share Multiview Multitask
コンピュータビジョンにおいて視線推定はますます重要になっている。本論文では、視線推定法の主流を体系的に研究し、視線点と視線方向を同時に推定する新しい方法論を提案する。まず、ローカル共有ネットワークを構築する。ネットワーク計算パラメータを削減し、迅速に収束することができる注視点の特徴抽出および注視方向推定;第2に、注視方向のためのマルチビューマルチタスク学習(MTL)フレームワークを提案し、左目と右目に対して同一平面上の制約を提案します。注視点、3つのビューのデータ入力により間接的に目の位置情報が導入され、クロスビュープーリングモジュールが設計され、注視点と注視方向の両方の推定を処理するジョイントロスが提案されます。最終的に、3つの注視点を使用するためのデータセットが収集されます。パブリックデータセットが存在するためのビュー。この実験は、私たちの方法が、視線の2つの指標に関する現在の主流の方法であることを示しています。ポイントと視線方向。
Eye gaze estimation has become increasingly significant in computer vision.In this paper,we systematically study the mainstream of eye gaze estimation methods,propose a novel methodology to estimate eye gaze points and eye gaze directions simultaneously.First,we construct a local sharing network for feature extraction of gaze points and gaze directions estimation,which can reduce network computational parameters and converge quickly;Second,we propose a Multiview Multitask Learning (MTL) framework,for gaze directions,a coplanar constraint is proposed for the left and right eyes,for gaze points,three views data input indirectly introduces eye position information,a cross-view pooling module is designed, propose joint loss which handle both gaze points and gaze directions estimation.Eventually,we collect a dataset to use of gaze points,which have three views to exist public dataset.The experiment show our method is state-of-the-art the current mainstream methods on two indicators of gaze points and gaze directions.
updated: Mon Jan 18 2021 15:14:24 GMT+0000 (UTC)
published: Mon Jan 18 2021 15:14:24 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト