arXiv reaDer
多人オプティカルフローの学習
Learning Multi-Human Optical Flow
 人間のオプティカルフローは、人間の行動の分析に役立つことがよく知られています。最近のオプティカルフローの方法は、問題にアプローチするためのディープネットワークのトレーニングに焦点を当てています。ただし、彼らが使用するトレーニングデータは、人間の動きの領域をカバーしていません。したがって、複数の人間のオプティカルフローのデータセットを開発し、このデータセットでオプティカルフローネットワークをトレーニングします。人体とモーションキャプチャデータの3Dモデルを使用して、一人称と複数人の両方の画像で現実的な流れ場を合成します。次に、オプティカルフローネットワークをトレーニングして、画像のペアから人間のフローフィールドを推定します。トレーニング済みのネットワークは、保持されたテストデータのさまざまなトップメソッドよりも正確であり、実際の画像シーケンスに一般化できることを実証します。コード、トレーニングされたモデル、およびデータセットは研究に利用できます。
The optical flow of humans is well known to be useful for the analysis of human action. Recent optical flow methods focus on training deep networks to approach the problem. However, the training data used by them does not cover the domain of human motion. Therefore, we develop a dataset of multi-human optical flow and train optical flow networks on this dataset. We use a 3D model of the human body and motion capture data to synthesize realistic flow fields in both single- and multi-person images. We then train optical flow networks to estimate human flow fields from pairs of images. We demonstrate that our trained networks are more accurate than a wide range of top methods on held-out test data and that they can generalize well to real image sequences. The code, trained models and the dataset are available for research.
updated: Wed Dec 04 2019 10:48:45 GMT+0000 (UTC)
published: Thu Oct 24 2019 11:44:46 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト