動物の姿勢を推定することで、生体力学、神経科学、動物行動学、ロボット工学、娯楽産業などの分野で基本的な動物の動きを理解しやすくなります。人間の姿勢推定モデルは、利用可能な大量のトレーニングデータにより、高いパフォーマンスを実現しています。動物のポーズのデータセットがないため、動物のポーズの推定で同じ結果を達成することは困難です。この問題に対処するために、ゲームエンジンUnityを使用して生成されたグラウンドトゥルースポーズとバウンディングボックス座標を含む犬の合成データセットであるSyDogを紹介します。 SyDogでトレーニングされたポーズ推定モデルは、純粋に実際のデータでトレーニングされたモデルよりも優れたパフォーマンスを実現し、画像の労働集約的なラベル付けの必要性を大幅に削減することを示します。動物の動きの研究のためのトレーニングと評価のベンチマークとしてSyDogデータセットをリリースします。
Estimating the pose of animals can facilitate the understanding of animal motion which is fundamental in disciplines such as biomechanics, neuroscience, ethology, robotics and the entertainment industry. Human pose estimation models have achieved high performance due to the huge amount of training data available. Achieving the same results for animal pose estimation is challenging due to the lack of animal pose datasets. To address this problem we introduce SyDog: a synthetic dataset of dogs containing ground truth pose and bounding box coordinates which was generated using the game engine, Unity. We demonstrate that pose estimation models trained on SyDog achieve better performance than models trained purely on real data and significantly reduce the need for the labour intensive labelling of images. We release the SyDog dataset as a training and evaluation benchmark for research in animal motion.