既存のトラッカーは通常、各フレームの追跡結果として最大スコアの場所または提案を選択します。ただし、このような貪欲な検索スキームは、特に重いオクルージョンや高速モーションなどの困難な追跡シナリオに遭遇した場合は、最適な選択ではない可能性があります。蓄積されたエラーにより、応答スコアの信頼性が低下するためです。この論文では、この問題に対処するために、新しいマルチエージェント強化学習ベースのビームサーチ戦略(BeamTrackingと呼ばれる)を提案します。具体的には、複数の並列意思決定プロセスによって満たされるサンプル選択問題として追跡を定式化します。各プロセスは、各フレームでの追跡結果として1つのサンプルを選択することを目的としています。ターゲット機能、提案機能、およびその応答スコアを状態として取得し、近くのエージェントによって予測されたアクションも考慮して、マルチエージェントがアクションを選択するようにトレーニングします。すべてのフレームが処理されたら、追跡結果として累積スコアが最大の軌道を選択します。 7つの人気のある追跡ベンチマークデータセットでの広範な実験により、提案されたアルゴリズムの有効性が検証されました。
Existing trackers usually select a location or proposal with the maximum score as tracking result for each frame. However, such greedy search scheme maybe not the optimal choice, especially when encountering challenging tracking scenarios like heavy occlusions and fast motion. Since the accumulated errors would make response scores not reliable anymore. In this paper, we propose a novel multi-agent reinforcement learning based beam search strategy (termed BeamTracking) to address this issue. Specifically, we formulate the tracking as a sample selection problem fulfilled by multiple parallel decision-making processes, each of which aims at picking out one sample as their tracking result in each frame. We take the target feature, proposal feature, and its response score as state, and also consider actions predicted by nearby agent, to train multi-agents to select their actions. When all the frames are processed, we select the trajectory with the maximum accumulated score as the tracking result. Extensive experiments on seven popular tracking benchmark datasets validated the effectiveness of the proposed algorithm.