人間の環境で動作する自律型ロボット システムは、正確かつ安全な決定を下すために、周囲を理解する必要があります。人間とロボットのクローズアップ インタラクションとロボット ナビゲーションを伴う混雑した人間のシーンで深い理解を得るには、人体の姿勢の推定と追跡を使用して、時間の経過に伴う人間の動きと身体のダイナミクスを推論する必要があります。ただし、既存のデータセットには、ポーズの注釈が含まれていないか、ロボット アプリケーションに関係のないシーン タイプが含まれています。多くのデータセットには、混雑した人間のシーンに見られるポーズやオクルージョンの多様性も欠けています。この制限に対処するために、ソーシャル ナビゲーション ロボットからキャプチャされたビデオを使用した複数人の姿勢の推定と追跡のための大規模なデータセットとベンチマークである JRDB-Pose を導入します。データセットには、混雑した屋内と屋外の場所、およびさまざまなスケールとオクルージョン タイプのチャレンジ シーンが含まれています。 JRDB-Pose は、シーン全体で一貫したキーポイントごとのオクルージョン ラベルとトラック ID を使用して、人間のポーズの注釈を提供します。公開評価サーバーは、保留中のテスト セットで公正な評価を行うために利用できます。 JRDB-Pose は https://jrdb.erc.monash.edu/ で入手できます。
Autonomous robotic systems operating in human environments must understand their surroundings to make accurate and safe decisions. In crowded human scenes with close-up human-robot interaction and robot navigation, a deep understanding requires reasoning about human motion and body dynamics over time with human body pose estimation and tracking. However, existing datasets either do not provide pose annotations or include scene types unrelated to robotic applications. Many datasets also lack the diversity of poses and occlusions found in crowded human scenes. To address this limitation we introduce JRDB-Pose, a large-scale dataset and benchmark for multi-person pose estimation and tracking using videos captured from a social navigation robot. The dataset contains challenge scenes with crowded indoor and outdoor locations and a diverse range of scales and occlusion types. JRDB-Pose provides human pose annotations with per-keypoint occlusion labels and track IDs consistent across the scene. A public evaluation server is made available for fair evaluation on a held-out test set. JRDB-Pose is available at https://jrdb.erc.monash.edu/ .