社会的会話における人間の行動の予測におけるデフォルトのパラダイムは、関心のある特定の将来の意味イベント(例えば、話者の順番の変更、グループの離脱)を選択し、次にそれらの低レベルの非言語的手がかりとの関係を特定することを含みます。このようなトップダウンアプローチの一般的なハードルは、そのようなイベントの頻度が低いことに起因する、教師あり学習のためのイベントラベル付きデータの限られた可用性です。この課題に取り組むために、予測を新しいボトムアップの自己監視問題にキャストして、大量の低レベルの行動の手がかりを活用することを提案します。社会的合図予測(SCF)のタスクを形式化し、関連する特定のモデリングの課題を特徴付けます。これらに対処するために、社会科学文献からの重要な観察に基づいて、社会的プロセス(SP)モデルを提案します。これは、各会話グループをグループ固有のダイナミクスを説明するメタ学習タスクと見なす、社会的に認識されたシーケンス間モデルです。私たちのSPモデルは、グループのすべてのメンバーの将来について共同で推論することにより、グローバルな不確実性を捉えながら、各参加者の将来の手がかりのイベントにとらわれない表現を学習します。 SCFのこの新しいタスクでは、実世界の行動データに対する非メタ学習モデルよりも改善された経験的パフォーマンスが、メタ学習アプローチを検証します。さらに、アブレーションと同様の仮定を持つメタ学習モデルとの比較により、このタスクの特定のモデリングの選択が検証されます。
The default paradigm in the forecasting of human behavior in social conversations, involves selecting specific future semantic events of interest (e.g. speaker turn changes, group leaving) and then identifying their relationships to low-level nonverbal cues. A common hurdle in such top-down approaches is the limited availability of event-labeled data for supervised learning, stemming from the infrequency of such events. To tackle this challenge, we propose to cast forecasting into a novel bottom-up self-supervised problem to leverage the larger amount of low-level behavior cues. We formalize the task of Social Cue Forecasting (SCF), and characterize the specific modeling challenges involved. To address these we build upon key observations from social science literature and propose the Social Process (SP) models--socially aware sequence-to-sequence models that view each conversation group as a meta-learning task to account for group-specific dynamics. Our SP models learn event agnostic representations of future cues for each participant, while capturing global uncertainty by jointly reasoning about the future for all members of the group. For this novel task of SCF, improved empirical performance over non meta-learning models on real-world behavior data validates our meta-learning approach. Moreover, ablations and comparison against meta-learning models with similar assumptions validate our specific modeling choices for this task.