クロスビュー画像マッチングの目的は、同じターゲットシーンの異なるプラットフォームから取得された画像をマッチングし、ポジショニングシステムがターゲットシーンの位置を推測するのを支援することです。ドローン技術の急速な発展に伴い、クロスビューマッチング技術を介してドローンの測位やナビゲーションを支援する方法は、挑戦的な研究トピックになっています。ただし、現在のクロスビューマッチングモデルの精度はまだ低くなっています。これは主に、既存の公開データセットに、さまざまな高さのドローンによって取得された画像の違いが含まれておらず、シーンのタイプが比較的均一であるため、モデルが複雑で変化するシーンに適応します。これらの問題に対処するために、新しいクロスビューデータセットSUES-200を提案します。SUES-200には、4つの飛行高さでドローンによって取得された画像と、同じターゲットシーンでの対応する衛星ビュー画像が含まれています。私たちの知る限り、SUES-200は、さまざまな飛行高さでのドローンの航空写真によって生成された違いを考慮した最初のデータセットです。さらに、クロスビューマッチングモデルの効率的なトレーニングテストと評価のためのパイプラインを構築します。次に、クロスビューマッチングモデルの評価システムを通じて、SUES-200上のさまざまなCNNアーキテクチャを備えた特徴抽出器のパフォーマンスを包括的に評価し、堅牢なベースラインモデルを提案します。実験結果は、SUES-200が、モデルがさまざまな高さで高い識別力を持つ特徴を学習するのに役立つことを示しています。ドローンカメラのポーズや周囲の環境が航空写真に与える影響が少ないため、ドローンの飛行高度が高くなるにつれて、マッチングシステムの評価指標が向上します。
The purpose of cross-view image matching is to match images acquired from the different platforms of the same target scene and then help positioning system to infer the location of the target scene. With the rapid development of drone technology, how to help Drone positioning or navigation through cross-view matching technology has become a challenging research topic. However, the accuracy of current cross-view matching models is still low, mainly because the existing public datasets do not include the differences in images obtained by drones at different heights, and the types of scenes are relatively homogeneous, which makes the models unable to adapt to complex and changing scenes. We propose a new cross-view dataset, SUES-200, to address these issues.SUES-200 contains images acquired by the drone at four flight heights and the corresponding satellite view images under the same target scene. To our knowledge, SUES-200 is the first dataset that considers the differences generated by aerial photography of drones at different flight heights. In addition, we build a pipeline for efficient training testing and evaluation of cross-view matching models. Then, we comprehensively evaluate the performance of feature extractors with different CNN architectures on SUES-200 through an evaluation system for cross-view matching models and propose a robust baseline model. The experimental results show that SUES-200 can help the model learn features with high discrimination at different heights. Evaluating indicators of the matching system improves as the drone flight height gets higher because the drone camera pose and the surrounding environment have less influence on aerial photography.