arXiv reaDer
Are you really looking at me? A Feature-Extraction Framework for Estimating Interpersonal Eye Gaze from Conventional Video
 私たちの日常生活におけるビデオカメラの普及に革命がありますが、非言語的感情コミュニケーションの最も意味のある形態の1つである対人視線、つまり会話相手に対する視線は、一般的なビデオからは利用できません。特別なハードウェアや参加者の場所に関する予備知識がなくても、ビデオ録画から対人視線を自動的に抽出する対人キャリブレーション視線エンコーダー(ICE)を導入します。個人が会話の大部分をお互いに見ているという直感を活用することで、ICE動的クラスタリングアルゴリズムは対人の視線を抽出できます。赤外線視線トラッカー(F1 = 0.846、N = 8)を使用した客観的なメトリックを使用したビデオチャットと、アイコンタクトの専門家による評価(r = 0.37、N)による対面コミュニケーションの両方でICEを検証します= 170)。次に、ICEを使用して、2つの異なる、しかし重要な感情的なコミュニケーションドメインでの行動を分析します。尋問に基づく詐欺検出と、スピードデートにおけるコミュニケーションスキル評価です。正直な目撃者は対人の視線の接触を破り、質問に答えるときに虚偽の目撃者よりも頻繁に見下すことがわかります(p = 0.004、d = 0.79)。スピードデートのビデオで専門家のコミュニケーションスキルの評価を予測する際に、対人視線だけが表情よりも予測力があることを実証します。
Despite a revolution in the pervasiveness of video cameras in our daily lives, one of the most meaningful forms of nonverbal affective communication, interpersonal eye gaze, i.e. eye gaze relative to a conversation partner, is not available from common video. We introduce the Interpersonal-Calibrating Eye-gaze Encoder (ICE), which automatically extracts interpersonal gaze from video recordings without specialized hardware and without prior knowledge of participant locations. Leveraging the intuition that individuals spend a large portion of a conversation looking at each other enables the ICE dynamic clustering algorithm to extract interpersonal gaze. We validate ICE in both video chat using an objective metric with an infrared gaze tracker (F1=0.846, N=8), as well as in face-to-face communication with expert-rated evaluations of eye contact (r= 0.37, N=170). We then use ICE to analyze behavior in two different, yet important affective communication domains: interrogation-based deception detection, and communication skill assessment in speed dating. We find that honest witnesses break interpersonal gaze contact and look down more often than deceptive witnesses when answering questions (p=0.004, d=0.79). In predicting expert communication skill ratings in speed dating videos, we demonstrate that interpersonal gaze alone has more predictive power than facial expressions.
updated: Fri Jan 17 2020 20:32:21 GMT+0000 (UTC)
published: Fri Jun 21 2019 19:23:31 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト