この論文は、RGB画像からの3D人体形状と姿勢推定の問題に取り組んでいます。このタスクへのいくつかの最近のアプローチは、入力画像を条件とする人体モデルパラメータの確率分布を予測します。これは、特に体の一部が局所的に閉塞されている場合に、複数の3D再構成が画像の証拠と一致する可能性があるという問題の不適切な性質によって動機付けられています。ただし、広く使用されているボディモデル(SMPLなど)のボディ形状パラメータは、ボディ表面全体のグローバルな変形を制御します。これらのグローバルな形状パラメータの分布は、局所的に閉塞された身体部分に関連する形状推定の不確実性を有意義に捉えることができません。対照的に、(i)セマンティックボディ測定の形式でローカルボディ形状の分布を予測し、(ii)線形マッピングを使用してボディ測定のローカル分布をSMPL形状パラメーターのグローバル分布に変換する方法を示します。局所的な身体測定分布を確率的に組み合わせることにより、SSP-3Dデータセットおよびテープ測定された人間のプライベートデータセットでのアイデンティティに依存する体型推定精度の点で、私たちの方法が現在の最先端技術よりも優れていることを示します。被写体の複数の画像から予測。
This paper addresses the problem of 3D human body shape and pose estimation from RGB images. Some recent approaches to this task predict probability distributions over human body model parameters conditioned on the input images. This is motivated by the ill-posed nature of the problem wherein multiple 3D reconstructions may match the image evidence, particularly when some parts of the body are locally occluded. However, body shape parameters in widely-used body models (e.g. SMPL) control global deformations over the whole body surface. Distributions over these global shape parameters are unable to meaningfully capture uncertainty in shape estimates associated with locally-occluded body parts. In contrast, we present a method that (i) predicts distributions over local body shape in the form of semantic body measurements and (ii) uses a linear mapping to transform a local distribution over body measurements to a global distribution over SMPL shape parameters. We show that our method outperforms the current state-of-the-art in terms of identity-dependent body shape estimation accuracy on the SSP-3D dataset, and a private dataset of tape-measured humans, by probabilistically-combining local body measurement distributions predicted from multiple images of a subject.