馬の痛みをタイムリーに検出することは、馬の福祉にとって重要です。馬は顔や体の行動を通して痛みを表現しますが、見知らぬ人間の観察者から痛みの兆候を隠すことがあります。さらに、馬の行動と痛みの状態の詳細な注釈を付けて視覚データを収集することは、面倒であり、拡張性がありません。その結果、実用的な馬の痛みの分類システムは、観察されていない馬と弱いラベルのビデオを使用します。この論文は、時間的にまばらなビデオレベルの痛みのラベルを用いて、整形外科の痛みが誘発された観察されていない馬のマルチビュー監視ビデオ映像を使用することによる馬の痛みの分類のためのそのような方法を提案する。痛みが馬のボディーランゲージだけから学習されるようにするために、まず自己監視生成モデルをトレーニングして、馬のポーズをその外観と背景から解きほぐしてから、解きほぐされた馬のポーズの潜在表現を痛みの分類に使用します。痛みのラベルを最大限に活用するために、痛みの分類を複数インスタンスの学習問題として定式化する新しい損失を開発します。私たちの方法は、60%の精度で人間の専門家のパフォーマンスよりも優れた痛みの分類精度を達成します。学習された潜在的な馬のポーズ表現は、視点共変であり、馬の外観から解きほぐされていることが示されています。痛みの分類されたセグメントの定性分析は、私たちのモデルによって特定された痛みの症状と、獣医の診療で使用される馬の痛みの尺度との間の対応を示しています。
Timely detection of horse pain is important for equine welfare. Horses express pain through their facial and body behavior, but may hide signs of pain from unfamiliar human observers. In addition, collecting visual data with detailed annotation of horse behavior and pain state is both cumbersome and not scalable. Consequently, a pragmatic equine pain classification system would use video of the unobserved horse and weak labels. This paper proposes such a method for equine pain classification by using multi-view surveillance video footage of unobserved horses with induced orthopaedic pain, with temporally sparse video level pain labels. To ensure that pain is learned from horse body language alone, we first train a self-supervised generative model to disentangle horse pose from its appearance and background before using the disentangled horse pose latent representation for pain classification. To make best use of the pain labels, we develop a novel loss that formulates pain classification as a multi-instance learning problem. Our method achieves pain classification accuracy better than human expert performance with 60% accuracy. The learned latent horse pose representation is shown to be viewpoint covariant, and disentangled from horse appearance. Qualitative analysis of pain classified segments shows correspondence between the pain symptoms identified by our model, and equine pain scales used in veterinary practice.