arXiv reaDer
3Dポーズグラウンドトゥルースのない新しいコンテキストでのヒューリスティックな弱教師あり3D人間ポーズ推定
Heuristic Weakly Supervised 3D Human Pose Estimation in Novel Contexts without Any 3D Pose Ground Truth
単一のRGB画像からの単眼3D人物ポーズ推定は、過去数年間で多くの注目を集めています。ただし、競争力のあるパフォーマンスを備えたポーズ推論モデルでは、3Dポーズグラウンドトゥルースデータまたは少なくともターゲットドメイン内の既知のポーズ事前確率による監視が必要です。ただし、データ収集の制約がある多くの実際のアプリケーションでは、これらのデータ要件を達成できない場合があります。この論文では、微調整の場合でも、グラウンドトゥルースの3Dポーズデータにアクセスできない状況で3D人間のポーズを推定するための、ヒューリスティックな弱教師あり人間ポーズ(HW-HuP)ソリューションを紹介します。 HW-HuPは、パブリック3D人間ポーズデータセットから部分的なポーズの事前情報を学習し、ターゲットドメインからのアクセスしやすい観測を使用して、最適化と回帰のハイブリッドサイクルで3D人間のポーズと形状を繰り返し推定します。私たちの設計では、補助情報としての深度データがトレーニング中の弱い監視として使用されますが、推論には必要ありません。 HW-HuPは、完全な3Dポーズ監視の恩恵を受ける最先端のアプローチと、パブリックベンチマークで同等のパフォーマンスを示します。この論文では、信頼できる3Dポーズデータが存在しない乳児だけでなく、就寝中の個人の3Dポーズ推定の2つの実用的なアプリケーションに焦点を当てます。
Monocular 3D human pose estimation from a single RGB image has received a lot attentions in the past few year. Pose inference models with competitive performance however require supervision with 3D pose ground truth data or at least known pose priors in their target domain. Yet, these data requirements in many real-world applications with data collection constraints may not be attainable. In this paper, we present a heuristic weakly supervised human pose (HW-HuP) solution to estimate 3D human pose in contexts that no ground truth 3D pose data is accessible, even for fine-tuning. HW-HuP learns partial pose priors from public 3D human pose datasets and uses easy-to-access observations from the target domain to iteratively estimate 3D human pose and shape in an optimization and regression hybrid cycle. In our design, depth data as an auxiliary information is employed as weak supervision during training, yet it is not needed for the inference. HW-HuP shows comparable performance on public benchmarks to the state-of-the-art approaches which benefit from full 3D pose supervision. In this paper, we focus on two practical applications of 3D pose estimation for individuals while in bed as well as infants, where no reliable 3D pose data exists.
updated: Mon Jan 24 2022 20:58:21 GMT+0000 (UTC)
published: Sun May 23 2021 18:40:29 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト