arXiv reaDer
デュアルレゾリューション通信ネットワーク
Dual-Resolution Correspondence Networks
画像のペア間でピクセル単位の密な対応を確立する問題に取り組みます。この作業では、Dual-Resolution Correspondence Networks(DualRC-Net)を導入して、ピクセル単位の対応を粗い方法から細かい方法で取得します。 DualRC-Netは、粗い解像度と細かい解像度の両方の特徴マップを抽出します。粗いマップは、完全であるが粗い4D相関テンソルを生成するために使用され、学習可能な近隣コンセンサスモジュールによって洗練されます。細かい解像度の特徴マップを使用して、洗練された粗い4D相関テンソルによって導かれる最終的な密な対応を取得します。選択された粗い解像度の一致スコアにより、細かい解像度の機能は、限られた数の可能な一致にのみ高い信頼性で焦点を合わせることができます。このようにして、DualRC-Netは、高解像度の特徴マップに高価な4D畳み込みカーネルを適用することを回避しながら、マッチングの信頼性とローカリゼーションの精度を劇的に向上させます。 HPatches、InLoc、AachenDay-Nightなどの大規模な公開ベンチマークでメソッドを包括的に評価します。それはそれらすべてで最先端の結果を達成します。
We tackle the problem of establishing dense pixel-wise correspondences between a pair of images. In this work, we introduce Dual-Resolution Correspondence Networks (DualRC-Net), to obtain pixel-wise correspondences in a coarse-to-fine manner. DualRC-Net extracts both coarse- and fine- resolution feature maps. The coarse maps are used to produce a full but coarse 4D correlation tensor, which is then refined by a learnable neighbourhood consensus module. The fine-resolution feature maps are used to obtain the final dense correspondences guided by the refined coarse 4D correlation tensor. The selected coarse-resolution matching scores allow the fine-resolution features to focus only on a limited number of possible matches with high confidence. In this way, DualRC-Net dramatically increases matching reliability and localisation accuracy, while avoiding to apply the expensive 4D convolution kernels on fine-resolution feature maps. We comprehensively evaluate our method on large-scale public benchmarks including HPatches, InLoc, and Aachen Day-Night. It achieves the state-of-the-art results on all of them.
updated: Wed Oct 28 2020 17:16:58 GMT+0000 (UTC)
published: Tue Jun 16 2020 00:42:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト