arXiv reaDer
人物の再識別を使用したワイドベースラインマルチカメラキャリブレーション
Wide-Baseline Multi-Camera Calibration using Person Re-Identification
建設現場、スポーツスタジアム、公共スペース用のカメラなど、大規模な環境のワイドベースラインシナリオ用のカメラネットワークの3Dポーズを推定する問題に対処します。 2つの非常に異なるカメラビューから観察された同じ3Dキーポイントを検出して照合することは困難であり、標準のモーションからの構造(SfM)パイプラインを適用できないため、このタスクは困難です。このような状況では、シーン内の人々を「キーポイント」として扱い、異なるカメラビュー間でそれらを関連付けることは、通信を取得するための代替方法になります。この直感に基づいて、ワイドベースラインカメラのキャリブレーションに人物再識別(re-ID)のアイデアを使用する方法を提案します。私たちの方法は、最初にre-IDメソッドを使用してカメラ間で人間のバウンディングボックスを関連付け、次にバウンディングボックスの対応をポイントの対応に変換し、最後にマルチビュージオメトリとバンドル調整を使用してカメラのポーズを解決します。私たちの方法は、目に見える人を除いて特別なキャリブレーションターゲットを必要としないため、頻繁なキャリブレーションの更新が必要な状況に適用されます。さまざまなサイズのシーン、カメラ設定(屋内と屋外)、および人間の活動(ウォーキング、バスケットボール、建設)からキャプチャされたデータセットに対して広範な実験を実行します。実験結果は、私たちの方法が手動でラベル付けされた点の対応に依存する標準的なSfM方法と同様のパフォーマンスを達成することを示しています。
We address the problem of estimating the 3D pose of a network of cameras for large-environment wide-baseline scenarios, e.g., cameras for construction sites, sports stadiums, and public spaces. This task is challenging since detecting and matching the same 3D keypoint observed from two very different camera views is difficult, making standard structure-from-motion (SfM) pipelines inapplicable. In such circumstances, treating people in the scene as "keypoints" and associating them across different camera views can be an alternative method for obtaining correspondences. Based on this intuition, we propose a method that uses ideas from person re-identification (re-ID) for wide-baseline camera calibration. Our method first employs a re-ID method to associate human bounding boxes across cameras, then converts bounding box correspondences to point correspondences, and finally solves for camera pose using multi-view geometry and bundle adjustment. Since our method does not require specialized calibration targets except for visible people, it applies to situations where frequent calibration updates are required. We perform extensive experiments on datasets captured from scenes of different sizes, camera settings (indoor and outdoor), and human activities (walking, playing basketball, construction). Experiment results show that our method achieves similar performance to standard SfM methods relying on manually labeled point correspondences.
updated: Sat Apr 17 2021 15:09:18 GMT+0000 (UTC)
published: Sat Apr 17 2021 15:09:18 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト