arXiv reaDer
Each Part Matters: Local Patterns Facilitate Cross-view Geo-localization
クロスビュージオローカリゼーションとは、ドローンビューカメラや衛星など、異なるプラットフォームから同じ地理的ターゲットの画像を見つけることです。極端な視点の変化によって引き起こされる大きな視覚的外観の変化には挑戦的です。既存の方法は通常、画像中心の地理的ターゲットのきめ細かい特徴のマイニングに集中しますが、隣接領域のコンテキスト情報を過小評価します。この作業では、隣接する領域を補助情報として活用して、ジオローカリゼーションの識別の手がかりを充実させることができると主張します。具体的には、ローカルパターンネットワーク(LPN)と呼ばれるシンプルで効果的なディープニューラルネットワークを導入して、コンテキスト情報をエンドツーエンドで活用します。 LPNは、余分なパーツ推定器を使用せずに、画像の中心までの距離に応じて注意を払うスクエアリングフィーチャパーティション戦略を採用しています。パーツのマッチングが容易になり、パーツごとの表現学習が可能になります。スクエアリングパーティション設計により、提案されたLPNは回転変動に対して優れたスケーラビリティを備え、3つの一般的なベンチマーク、つまり、University-1652、CVUSA、およびCVACTで競争力のある結果を達成します。さらに、提案されたLPNを他のフレームワークに簡単に組み込んで、パフォーマンスをさらに向上させることもできます。
Cross-view geo-localization is to spot images of the same geographic target from different platforms, e.g., drone-view cameras and satellites. It is challenging in the large visual appearance changes caused by extreme viewpoint variations. Existing methods usually concentrate on mining the fine-grained feature of the geographic target in the image center, but underestimate the contextual information in neighbor areas. In this work, we argue that neighbor areas can be leveraged as auxiliary information, enriching discriminative clues for geolocalization. Specifically, we introduce a simple and effective deep neural network, called Local Pattern Network (LPN), to take advantage of contextual information in an end-to-end manner. Without using extra part estimators, LPN adopts a square-ring feature partition strategy, which provides the attention according to the distance to the image center. It eases the part matching and enables the part-wise representation learning. Owing to the square-ring partition design, the proposed LPN has good scalability to rotation variations and achieves competitive results on three prevailing benchmarks, i.e., University-1652, CVUSA and CVACT. Besides, we also show the proposed LPN can be easily embedded into other frameworks to further boost performance.
updated: Sun Jun 06 2021 02:46:25 GMT+0000 (UTC)
published: Wed Aug 26 2020 16:06:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト