arXiv reaDer
放送ホッケービデオでのパックのローカリゼーションとマルチタスクイベントの認識
Puck localization and multi-task event recognition in broadcast hockey videos
パックのローカリゼーションは、ゲームの分析、プレイ場所の決定、パックの所持の評価に役立つアイスホッケーのビデオ分析における重要な問題です。この問題は、パックのサイズが小さいこと、パックの速度が速いことによる過度のモーションブラー、プレーヤーとボードによるオクルージョンのために困難です。この論文では、放送ホッケービデオにおけるパックローカリゼーションのためのネットワークを紹介し、実装します。ネットワークは、エキスパートのNHLの実況アノテーションを活用し、時間的コンテキストを使用してパックを特定します。プレーヤーの位置は、プレーヤーの位置に描画されたガウスベースの空間ヒートマップを使用してプレーヤーの位置をエンコードすることにより、注意メカニズムを通じてネットワークに組み込まれます。リンクとパックの場所でのイベントの発生は関連しているため、パックのローカリゼーションネットワークにイベント認識ヘッドを追加し、マルチタスク学習を通じてネットワークをトレーニングすることで、イベント認識も実行します。実験結果は、ネットワークがテストセットで73.1%のAUCでパックをローカライズできることを示しています。パックの位置は、毎秒5フレームの720pブロードキャストビデオで推測できます。また、パックの位置を使用したマルチタスク学習により、イベント認識の精度が向上することも示されています。
Puck localization is an important problem in ice hockey video analytics useful for analyzing the game, determining play location, and assessing puck possession. The problem is challenging due to the small size of the puck, excessive motion blur due to high puck velocity and occlusions due to players and boards. In this paper, we introduce and implement a network for puck localization in broadcast hockey video. The network leverages expert NHL play-by-play annotations and uses temporal context to locate the puck. Player locations are incorporated into the network through an attention mechanism by encoding player positions with a Gaussian-based spatial heatmap drawn at player positions. Since event occurrence on the rink and puck location are related, we also perform event recognition by augmenting the puck localization network with an event recognition head and training the network through multi-task learning. Experimental results demonstrate that the network is able to localize the puck with an AUC of 73.1 % on the test set. The puck location can be inferred in 720p broadcast videos at 5 frames per second. It is also demonstrated that multi-task learning with puck location improves event recognition accuracy.
updated: Fri May 21 2021 20:43:54 GMT+0000 (UTC)
published: Fri May 21 2021 20:43:54 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト