arXiv reaDer
重なり推定による局所特徴マッチングのガイド
Guide Local Feature Matching by Overlap Estimation
大きな外観、視点、距離の変化の下でのローカル画像の特徴のマッチングは困難ですが重要です。従来の方法では、信頼できる一致を保証するためのヒューリスティックな整合性チェックを使用して、画像全体で暫定的なローカル機能を検出して一致させます。この論文では、一般的に可視領域での局所的な特徴のマッチングを制約するために、OETRという名前のTRansformerとの画像ペアを条件とする新しいオーバーラップ推定方法を紹介します。 OETRは、特徴相関とオーバーラップ回帰の2段階のプロセスでオーバーラップ推定を実行します。前処理モジュールとして、OETRを既存のローカル特徴検出およびマッチングパイプラインにプラグインして、潜在的な視野角またはスケールの変動を軽減できます。集中的な実験により、OETRは、特に共有領域が小さい画像ペアの場合に、最先端のローカル機能マッチングのパフォーマンスを大幅に向上させることができることが示されています。コードはhttps://github.com/AbyssGaze/OETRで公開されます。
Local image feature matching under large appearance, viewpoint, and distance changes is challenging yet important. Conventional methods detect and match tentative local features across the whole images, with heuristic consistency checks to guarantee reliable matches. In this paper, we introduce a novel Overlap Estimation method conditioned on image pairs with TRansformer, named OETR, to constrain local feature matching in the commonly visible region. OETR performs overlap estimation in a two-step process of feature correlation and then overlap regression. As a preprocessing module, OETR can be plugged into any existing local feature detection and matching pipeline, to mitigate potential view angle or scale variance. Intensive experiments show that OETR can boost state-of-the-art local feature matching performance substantially, especially for image pairs with small shared regions. The code will be publicly available at https://github.com/AbyssGaze/OETR.
updated: Wed Feb 23 2022 02:51:36 GMT+0000 (UTC)
published: Fri Feb 18 2022 07:11:36 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト