構造化されていない移動オブジェクトを含む動的環境は、同時ローカリゼーションおよびマッピング(SLAM)のパフォーマンスに大きな問題を引き起こします。剛体の動きは、通常、そのテクスチャと幾何学的特徴を利用して追跡できます。ただし、シーン内を移動する人間は、多くの場合、最も重要でインタラクティブなターゲットの1つです。形状が硬くないため、追跡や再構築が非常に困難です。この作業では、動的な人間のオブジェクトを分離し、リアルタイムの高密度背景再構成フレームワークを実現するための、高速な学習ベースの人間オブジェクト検出器を紹介します。さらに、人間のポーズと形状を推定して再構築します。最終的な出力環境マップは、密な静的背景を提供するだけでなく、動的な人間のメッシュとその軌道も含みます。当社のダイナミックSLAMシステムはGPU上で約26フレーム/秒(fps)で実行され、さらに正確な人間の姿勢推定をオンにすると、最大10fpsで実行できます。
Dynamic environments that include unstructured moving objects pose a hard problem for Simultaneous Localization and Mapping (SLAM) performance. The motion of rigid objects can be typically tracked by exploiting their texture and geometric features. However, humans moving in the scene are often one of the most important, interactive targets - they are very hard to track and reconstruct robustly due to non-rigid shapes. In this work, we present a fast, learning-based human object detector to isolate the dynamic human objects and realise a real-time dense background reconstruction framework. We go further by estimating and reconstructing the human pose and shape. The final output environment maps not only provide the dense static backgrounds but also contain the dynamic human meshes and their trajectories. Our Dynamic SLAM system runs at around 26 frames per second (fps) on GPUs, while additionally turning on accurate human pose estimation can be executed at up to 10 fps.