arXiv reaDer
合成データセットでのマーカーのない人間の動きのための深層学習技術のレビュー
A Review of Deep Learning Techniques for Markerless Human Motion on Synthetic Datasets
マーカーレスモーションキャプチャは、近年、コンピュータビジョンの活発な研究分野になっています。その広範なアプリケーションは、コンピューターアニメーション、人間の動きの分析、生物医学研究、仮想現実、スポーツ科学など、さまざまな分野で知られています。人間の姿勢を推定することは、コンピュータビジョンのコミュニティで最近ますます注目を集めていますが、不確実性の深さと合成データセットの欠如のために、それは挑戦的な作業です。この問題を解決するために最近さまざまなアプローチが提案されており、その多くは深層学習に基づいています。これらは主に、既存のベンチマークのパフォーマンスを大幅に向上させ、特に2D画像を改善することに重点を置いています。強力な深層学習技術と最近収集された実世界のデータセットに基づいて、2D画像のみに基づいてアニメーションの骨格を予測できるモデルを調査しました。単純なものから複雑なものまで、さまざまな体型を使用して合成されたポーズを使用して、さまざまな実世界のデータセットから生成されたフレーム。実装プロセスでは、独自のデータセットでDeepLabCutを使用して多くの必要な手順を実行し、入力フレームを使用してモデルをトレーニングします。出力は、人間の動きをアニメーション化したスケルトンです。複合データセットとその他の結果は、ディープモデルの「グラウンドトゥルース」です。
Markerless motion capture has become an active field of research in computer vision in recent years. Its extensive applications are known in a great variety of fields, including computer animation, human motion analysis, biomedical research, virtual reality, and sports science. Estimating human posture has recently gained increasing attention in the computer vision community, but due to the depth of uncertainty and the lack of the synthetic datasets, it is a challenging task. Various approaches have recently been proposed to solve this problem, many of which are based on deep learning. They are primarily focused on improving the performance of existing benchmarks with significant advances, especially 2D images. Based on powerful deep learning techniques and recently collected real-world datasets, we explored a model that can predict the skeleton of an animation based solely on 2D images. Frames generated from different real-world datasets with synthesized poses using different body shapes from simple to complex. The implementation process uses DeepLabCut on its own dataset to perform many necessary steps, then use the input frames to train the model. The output is an animated skeleton for human movement. The composite dataset and other results are the "ground truth" of the deep model.
updated: Fri Jan 07 2022 15:42:50 GMT+0000 (UTC)
published: Fri Jan 07 2022 15:42:50 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト