コンピュータビジョンの最近の進歩により、人間のポーズを理解するためにニューラルネットワークを使用するアプリケーションの注目度が高まっています。ただし、最先端のデータセットの精度は着実に向上していますが、これらのデータセットは、実際のアプリケーションで見られる課題に対処していないことがよくあります。これらの課題は、カメラから離れた人々、群衆の中にいる人々、およびひどく閉塞している人々に対処することです。その結果、多くの実際のアプリケーションは、展開時に存在するデータを反映しないデータでトレーニングを行っており、パフォーマンスが大幅に低下しています。この記事では、実際の人間の姿勢を推定するためのデータセットを自動的に生成する方法であるADG-Poseについて説明します。これらのデータセットは、人の距離、混雑度、および咬合分布を決定するためにカスタマイズできます。私たちの方法でトレーニングされたモデルは、他のデータセットでトレーニングされたモデルが失敗するこれらの課題の存在下で実行できます。 ADG-Poseを使用すると、現実世界のスケルトンベースのアクション認識のエンドツーエンドの精度で、中程度の距離とオクルージョンレベルのシーンで20%の増加が見られ、他のモデルがランダムよりも優れたパフォーマンスを発揮できなかった遠方のシーンで4倍の増加が見られます。 。
Recent advancements in computer vision have seen a rise in the prominence of applications using neural networks to understand human poses. However, while accuracy has been steadily increasing on State-of-the-Art datasets, these datasets often do not address the challenges seen in real-world applications. These challenges are dealing with people distant from the camera, people in crowds, and heavily occluded people. As a result, many real-world applications have trained on data that does not reflect the data present in deployment, leading to significant underperformance. This article presents ADG-Pose, a method for automatically generating datasets for real-world human pose estimation. These datasets can be customized to determine person distances, crowdedness, and occlusion distributions. Models trained with our method are able to perform in the presence of these challenges where those trained on other datasets fail. Using ADG-Pose, end-to-end accuracy for real-world skeleton-based action recognition sees a 20% increase on scenes with moderate distance and occlusion levels, and a 4X increase on distant scenes where other models failed to perform better than random.