災害対応ドローン用の複数のカメラとコンピュータービジョンを使用して、複数のオブジェクトを検出および識別することを目指しています。主な課題は、検出エラーの調整、IDの切り替えと断片化の解決、マルチスケール機能とグローバルなカメラの動きによる複数のビューへの適応です。これらの問題を解決するために、2つの簡単なアプローチが提案されています。 1つは、トラックレットの関連付けを追加した高速マルチカメラシステムであり、もう1つは、制限を解決するために高性能の検出器とトラッカーを組み込んだものです。 (...)最初のアプローチ(85.71%)の精度は、検証データセットのベースラインであるFairMOT(85.44%)と比較してわずかに改善されています。 L2ノルム誤差に基づいて計算された最終結果では、ベースラインは48.1でしたが、提案されたモデルの組み合わせは34.9であり、27.4%のマージンで誤差が大幅に減少しました。 2番目のアプローチでは、ハードウェアと時間の制限により、DeepSORTはすべてのフレームの4分の1しか処理しませんが、DeepSORTを使用したモデル(42.9%)は、リコールの点でFairMOT(71.4%)を上回ります。どちらのモデルも、2020年と2021年に韓国科学技術情報通信部が主催した「AIグランドチャレンジ」でそれぞれ2位と3位にランクされました。ソースコードは、これらのURL(github.com/mlvlab/drone_ai_challenge、github.com/mlvlab/Drone_Task1、github.com/mlvlab/Rony2_task3、github.com/mlvlab/Drone_task4)で公開されています。
We aim to detect and identify multiple objects using multiple cameras and computer vision for disaster response drones. The major challenges are taming detection errors, resolving ID switching and fragmentation, adapting to multi-scale features and multiple views with global camera motion. Two simple approaches are proposed to solve these issues. One is a fast multi-camera system that added a tracklet association, and the other is incorporating a high-performance detector and tracker to resolve restrictions. (...) The accuracy of our first approach (85.71%) is slightly improved compared to our baseline, FairMOT (85.44%) in the validation dataset. In the final results calculated based on L2-norm error, the baseline was 48.1, while the proposed model combination was 34.9, which is a great reduction of error by a margin of 27.4%. In the second approach, although DeepSORT only processes a quarter of all frames due to hardware and time limitations, our model with DeepSORT (42.9%) outperforms FairMOT (71.4%) in terms of recall. Both of our models ranked second and third place in the `AI Grand Challenge' organized by the Korean Ministry of Science and ICT in 2020 and 2021, respectively. The source codes are publicly available at these URLs (github.com/mlvlab/drone_ai_challenge, github.com/mlvlab/Drone_Task1, github.com/mlvlab/Rony2_task3, github.com/mlvlab/Drone_task4).