arXiv reaDer
軌道テンソルを使用したマルチカメラ軌道予測
Multi-Camera Trajectory Forecasting with Trajectory Tensors
マルチカメラ軌道予測(MCTF)の問題を紹介します。これには、カメラのネットワーク全体で移動するオブジェクトの軌道を予測することが含まれます。マルチカメラのセットアップは、監視や交通監視などのアプリケーションに広く使用されていますが、既存の軌道予測方法は通常、シングルカメラの軌道予測(SCTF)に重点を置いており、そのようなアプリケーションでの使用が制限されています。さらに、1台のカメラを使用すると、利用できる視野が制限され、長期的な軌道予測が不可能になります。 SCTFのこれらの欠点に対処するために、いくつかの視点から推定されたすべての相対オブジェクト位置を同時に使用し、すべての可能な視点でオブジェクトの将来の位置を予測するMCTFフレームワークを開発します。私たちのフレームワークは、オブジェクトがどのカメラに表示され、カメラビュー内のいつどこにオブジェクトが表示されるかを予測するWhich-When-Whereアプローチに従います。この目的のために、軌道テンソルの概念を提案します。これは、複数のカメラビューと関連する不確実性にわたって軌道をエンコードする新しい手法です。軌道テンソル用のいくつかのエンコーダ-デコーダMCTFモデルを開発し、MCTFタスク用に特別に作成された独自のデータベース(15のカメラビューからの600時間のビデオデータを含む)で広範な実験を提示します。結果は、軌道テンソルモデルが座標軌道ベースのMCTFモデルおよびMCTFに適合した既存のSCTFメソッドよりも優れていることを示しています。コードはhttps://github.com/olly-styles/Trajectory-Tensorsから入手できます。
We introduce the problem of multi-camera trajectory forecasting (MCTF), which involves predicting the trajectory of a moving object across a network of cameras. While multi-camera setups are widespread for applications such as surveillance and traffic monitoring, existing trajectory forecasting methods typically focus on single-camera trajectory forecasting (SCTF), limiting their use for such applications. Furthermore, using a single camera limits the field-of-view available, making long-term trajectory forecasting impossible. We address these shortcomings of SCTF by developing an MCTF framework that simultaneously uses all estimated relative object locations from several viewpoints and predicts the object's future location in all possible viewpoints. Our framework follows a Which-When-Where approach that predicts in which camera(s) the objects appear and when and where within the camera views they appear. To this end, we propose the concept of trajectory tensors: a new technique to encode trajectories across multiple camera views and the associated uncertainties. We develop several encoder-decoder MCTF models for trajectory tensors and present extensive experiments on our own database (comprising 600 hours of video data from 15 camera views) created particularly for the MCTF task. Results show that our trajectory tensor models outperform coordinate trajectory-based MCTF models and existing SCTF methods adapted for MCTF. Code is available from: https://github.com/olly-styles/Trajectory-Tensors
updated: Tue Aug 24 2021 09:33:07 GMT+0000 (UTC)
published: Tue Aug 10 2021 13:53:05 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト