arXiv reaDer
DFM:詳細な機能マッチングのパフォーマンスベースライン
DFM: A Performance Baseline for Deep Feature Matching
既成のディープニューラルネットワークによって抽出された学習特徴を利用して有望なパフォーマンスを得るための新しい画像マッチング法を提案します。提案された方法は、特徴抽出器として事前にトレーニングされたVGGアーキテクチャを使用し、マッチングを改善するために固有の追加のトレーニングを必要としません。メンタルローテーションパラダイムなど、心理学分野で確立された概念に触発されて、予備的な幾何学的変換の推定の結果として初期ワーピングが実行されます。これらの推定値は、照合する画像のVGGネットワーク出力の端末層での最近傍の密な照合に基づいています。この最初の位置合わせの後、同じアプローチが参照画像と位置合わせされた画像の間で階層的に再度繰り返され、良好なローカリゼーションとマッチングのパフォーマンスが得られます。私たちのアルゴリズムは、Hpatchesデータセットでそれぞれ1ピクセルと2ピクセルのしきい値の平均マッチング精度(MMA)に関して0.57と0.80の全体的なスコアを達成します。これは、最先端のパフォーマンスよりも優れていることを示しています。
A novel image matching method is proposed that utilizes learned features extracted by an off-the-shelf deep neural network to obtain a promising performance. The proposed method uses pre-trained VGG architecture as a feature extractor and does not require any additional training specific to improve matching. Inspired by well-established concepts in the psychology area, such as the Mental Rotation paradigm, an initial warping is performed as a result of a preliminary geometric transformation estimate. These estimates are simply based on dense matching of nearest neighbors at the terminal layer of VGG network outputs of the images to be matched. After this initial alignment, the same approach is repeated again between reference and aligned images in a hierarchical manner to reach a good localization and matching performance. Our algorithm achieves 0.57 and 0.80 overall scores in terms of Mean Matching Accuracy (MMA) for 1 pixel and 2 pixels thresholds respectively on Hpatches dataset, which indicates a better performance than the state-of-the-art.
updated: Mon Jun 14 2021 22:55:06 GMT+0000 (UTC)
published: Mon Jun 14 2021 22:55:06 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト