arXiv reaDer
人間の3Dメッシュで計算された体の寸法から学習する神経人類学計
A Neural Anthropometer Learning from Body Dimensions Computed on Human 3D Meshes
人間の形状の推定は、理論的にも実際的にもますます重要になっています。たとえば、3Dメッシュの推定、遠方の衣服の製造、計算による科学捜査などです。さらなる専門分野として、人体寸法推定(HBDE)は、通常は教師あり学習アプローチを使用して、画像または3Dメッシュから肩幅や胸囲などの人体測定値を推定することに焦点を当てています。このコンテキストでの主な障害は、データ不足の問題です。このグラウンドトゥルースを収集するには、費用がかかり、困難な手順が必要になるためです。この障害は、3D人間メッシュから現実的な人間の測定値を取得することで克服できます。ただし、a)3DメッシュからHBDを計算するための十分に確立された方法はなく、b)HBDEタスクの結果を公正に比較するためのベンチマークはありません。私たちの貢献は2つあります。一方では、潜在的な医療、仮想試着、距離調整アプリケーションに焦点を当てて、3Dメッシュから左右の腕の長さ、肩の幅、股下(股の高さ)を計算する方法を紹介します。一方、最近公開された方法を使用して計算された4つの追加の体の寸法を使用して、神経人類学計への監視信号として使用する8つの体の寸法のセットを組み立てます。これらの寸法を推定できる畳み込みニューラルネットワークです。推定を評価するために、3Dメッシュの合成画像を使用してNeural Anthropometerをトレーニングし、そこからHBDを計算して、ネットワークの全体的な平均推定誤差が20.89 mm(相対誤差2.84%)であることを確認しました。私たちが提示する結果は完全に再現可能であり、HBDEのタスクに関する研究の公正なベースラインを確立するため、コミュニティは貴重な方法を利用できます。
Human shape estimation has become increasingly important both theoretically and practically, for instance, in 3D mesh estimation, distance garment production and computational forensics, to mention just a few examples. As a further specialization, Human Body Dimensions Estimation (HBDE) focuses on estimating human body measurements like shoulder width or chest circumference from images or 3D meshes usually using supervised learning approaches. The main obstacle in this context is the data scarcity problem, as collecting this ground truth requires expensive and difficult procedures. This obstacle can be overcome by obtaining realistic human measurements from 3D human meshes. However, a) there are no well established methods to calculate HBDs from 3D meshes and b) there are no benchmarks to fairly compare results on the HBDE task. Our contribution is twofold. On the one hand, we present a method to calculate right and left arm length, shoulder width, and inseam (crotch height) from 3D meshes with focus on potential medical, virtual try-on and distance tailoring applications. On the other hand, we use four additional body dimensions calculated using recently published methods to assemble a set of eight body dimensions which we use as a supervision signal to our Neural Anthropometer: a convolutional neural network capable of estimating these dimensions. To assess the estimation, we train the Neural Anthropometer with synthetic images of 3D meshes, from which we calculated the HBDs and observed that the network's overall mean estimate error is 20.89 mm (relative error of 2.84%). The results we present are fully reproducible and establish a fair baseline for research on the task of HBDE, therefore enabling the community with a valuable method.
updated: Wed Oct 06 2021 12:56:05 GMT+0000 (UTC)
published: Wed Oct 06 2021 12:56:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト