arXiv reaDer
クロスカメラデータアソシエーションのためのグラフニューラルネットワーク
Graph Neural Networks for Cross-Camera Data Association
クロスカメラ画像データの関連付けは、マルチカメラ歩行者検出、マルチカメラマルチターゲットトラッキング、3Dポーズ推定など、多くのマルチカメラコンピュータービジョンタスクに不可欠です。この関連付けタスクは、通常、2分割グラフマッチングとして表されます。問題があり、多くの場合、最小コストのフロー手法を適用することで解決されます。これは、大きなデータでは計算効率が悪い場合があります。さらに、カメラは通常、グローバルなソリューションを一度に見つけるのではなく、ペアで処理され、ローカルなソリューションを取得します。その他の重要な問題は、親和性測定の問題です。ユークリッド距離やコサイン距離など、学習不可能な事前定義された距離が広く使用されています。この論文は、ペアでカメラを処理するのではなく、グローバルソリューションに焦点を合わせたクロスカメラデータアソシエーションのための効率的なアプローチを提案します。固定距離の使用を回避するために、以前はこのスコープで使用されていなかったGraph Neural Networksの接続を活用し、メッセージパッシングネットワークを使用して機能と類似性を共同で学習します。歩行者マルチビューアソシエーションの提案を検証し、EPFLマルチカメラ歩行者データセットの結果を示します。私たちのアプローチは、テストされたのと同じシナリオでトレーニングを受ける必要がなく、文献データの関連付け手法を大幅に上回っています。私たちのコードはhttp://www-vpu.eps.uam.es/publications/gnn_ccaで入手できます。
Cross-camera image data association is essential for many multi-camera computer vision tasks, such as multi-camera pedestrian detection, multi-camera multi-target tracking, 3D pose estimation, etc. This association task is typically stated as a bipartite graph matching problem and often solved by applying minimum-cost flow techniques, which may be computationally inefficient with large data. Furthermore, cameras are usually treated by pairs, obtaining local solutions, rather than finding a global solution at once. Other key issue is that of the affinity measurement: the widespread usage of non-learnable pre-defined distances, such as the Euclidean and Cosine ones. This paper proposes an efficient approach for cross-cameras data-association focused on a global solution, instead of processing cameras by pairs. To avoid the usage of fixed distances, we leverage the connectivity of Graph Neural Networks, previously unused in this scope, using a Message Passing Network to jointly learn features and similarity. We validate the proposal for pedestrian multi-view association, showing results over the EPFL multi-camera pedestrian dataset. Our approach considerably outperforms the literature data association techniques, without requiring to be trained in the same scenario in which it is tested. Our code is available at http://www-vpu.eps.uam.es/publications/gnn_cca.
updated: Mon Jan 17 2022 09:52:39 GMT+0000 (UTC)
published: Mon Jan 17 2022 09:52:39 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト