arXiv reaDer
Decanus to Legatus: 2D-3D 人間のポーズ リフティングの合成トレーニング
Decanus to Legatus: Synthetic training for 2D-3D human pose lifting
制御された環境の外でグラウンド トゥルース データを取得することは難しいため、3D の人間の姿勢推定は困難な作業です。さまざまなデータセット間のドメイン ギャップ、トレーニング データセットとテスト データセット間の目に見えないアクション、さまざまなハードウェア設定、アノテーションの高コストなど、さらに多くの問題が、このタスクのための普遍的で堅牢なモデルの構築の進行を妨げています。この論文では、 2D から 3D へのヒューマン ポーズ リフター ニューラル ネットワークのトレーニング中に、10 個の初期手作り 3D ポーズ (Decanus) に基づく 3D ポーズ分布から無限の 3D 合成ヒューマン ポーズ (Legatus) を生成するアルゴリズムを提案します。私たちの結果は、特殊なデータセットからの実際のデータを使用する方法に匹敵する3Dポーズ推定パフォーマンスを達成できることを示していますが、ゼロショットセットアップでは、フレームワークの一般化の可能性を示しています.
3D human pose estimation is a challenging task because of the difficulty to acquire ground-truth data outside of controlled environments. A number of further issues have been hindering progress in building a universal and robust model for this task, including domain gaps between different datasets, unseen actions between train and test datasets, various hardware settings and high cost of annotation, etc. In this paper, we propose an algorithm to generate infinite 3D synthetic human poses (Legatus) from a 3D pose distribution based on 10 initial handcrafted 3D poses (Decanus) during the training of a 2D to 3D human pose lifter neural network. Our results show that we can achieve 3D pose estimation performance comparable to methods using real data from specialized datasets but in a zero-shot setup, showing the generalization potential of our framework.
updated: Wed Oct 05 2022 13:10:19 GMT+0000 (UTC)
published: Wed Oct 05 2022 13:10:19 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト