効果的で柔軟なデータ取得により、無人航空機(UAV)は最近、コンピュータービジョン(CV)とリモートセンシング(RS)の分野全体でホットスポットになりました。ディープラーニング(DL)の最近の成功に触発されて、多くの高度なオブジェクト検出および追跡アプローチが、環境モニタリング、精密農業、交通管理などのさまざまなUAV関連タスクに広く適用されています。この論文は、DLベースのUAVオブジェクトの検出と追跡方法の研究の進歩と展望に関する包括的な調査を提供します。具体的には、まず課題と既存手法の統計を概説し、画像からの物体検出、動画からの物体検出、動画からの物体追跡の3つの研究トピックでDLベースのモデルの観点からソリューションを提供します。 UAVが支配的なオブジェクトの検出と追跡に関連するオープンデータセットは使い果たされており、4つのベンチマークデータセットがいくつかの最先端の方法を使用したパフォーマンス評価に採用されています。最後に、将来の作業の見通しと考慮事項について説明し、要約します。この調査は、リモートセンシング分野から来た研究者に、DLベースのUAVオブジェクトの検出および追跡方法の概要と、さらなる開発に関するいくつかの考えを提供するのに役立つことが期待されます。
Owing to effective and flexible data acquisition, unmanned aerial vehicle (UAV) has recently become a hotspot across the fields of computer vision (CV) and remote sensing (RS). Inspired by recent success of deep learning (DL), many advanced object detection and tracking approaches have been widely applied to various UAV-related tasks, such as environmental monitoring, precision agriculture, traffic management. This paper provides a comprehensive survey on the research progress and prospects of DL-based UAV object detection and tracking methods. More specifically, we first outline the challenges, statistics of existing methods, and provide solutions from the perspectives of DL-based models in three research topics: object detection from the image, object detection from the video, and object tracking from the video. Open datasets related to UAV-dominated object detection and tracking are exhausted, and four benchmark datasets are employed for performance evaluation using some state-of-the-art methods. Finally, prospects and considerations for the future work are discussed and summarized. It is expected that this survey can facilitate those researchers who come from remote sensing field with an overview of DL-based UAV object detection and tracking methods, along with some thoughts on their further developments.