arXiv reaDer
一貫した局所特徴マッチングのための適応スポットガイド変換器
Adaptive Spot-Guided Transformer for Consistent Local Feature Matching
局所特徴マッチングは、画像のペア間の対応を見つけることを目的としています。現在の検出器を使用しない方法では、Transformer アーキテクチャを活用して印象的なパフォーマンスを得ることができますが、ローカルの一貫性を維持することを考慮した研究はほとんどありません。一方、ほとんどの方法は、大規模なバリエーションに苦労しています。上記の問題に対処するために、ローカル特徴マッチング用の Adaptive Spot-Guided Transformer (ASTR) を提案します。これは、統一された粗から細かいアーキテクチャでローカルの一貫性とスケールの変動を共同でモデル化します。提案された ASTR にはいくつかのメリットがあります。まず、機能集約中に無関係な領域に干渉しないように、スポット ガイド付き集約モジュールを設計します。次に、細かい段階で計算された深度情報に従ってグリッドのサイズを調整する適応スケーリング モジュールを設計します。 5 つの標準ベンチマークに関する広範な実験結果は、当社の ASTR が最先端の方法に対して有利に機能することを示しています。私たちのコードは https://astr2023.github.io でリリースされます。
Local feature matching aims at finding correspondences between a pair of images. Although current detector-free methods leverage Transformer architecture to obtain an impressive performance, few works consider maintaining local consistency. Meanwhile, most methods struggle with large scale variations. To deal with the above issues, we propose Adaptive Spot-Guided Transformer (ASTR) for local feature matching, which jointly models the local consistency and scale variations in a unified coarse-to-fine architecture. The proposed ASTR enjoys several merits. First, we design a spot-guided aggregation module to avoid interfering with irrelevant areas during feature aggregation. Second, we design an adaptive scaling module to adjust the size of grids according to the calculated depth information at fine stage. Extensive experimental results on five standard benchmarks demonstrate that our ASTR performs favorably against state-of-the-art methods. Our code will be released on https://astr2023.github.io.
updated: Wed Mar 29 2023 12:28:01 GMT+0000 (UTC)
published: Wed Mar 29 2023 12:28:01 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト