arXiv reaDer
深い畳み込み特徴に基づく非線形強度ソナー画像マッチング
Nonlinear Intensity Sonar Image Matching based on Deep Convolution Features
水中ビジョン技術の継続的な開発により、ますます多くのリモートセンシング画像を取得できるようになりました。水中シーンでは、ソナーセンサーが現在最も効果的な遠隔知覚デバイスであり、それらによってキャプチャされたソナー画像は、豊富な環境情報を提供する可能性があります。特定のシーンを分析するために、さまざまな期間のソナー画像、さまざまなソナー周波数、および独特の視点をマージする必要があることがよくあります。ただし、上記のシーンでは、ソナー画像に非線形の強度差が生じるため、従来のマッチング方法はほとんど効果がありません。本論文は局所特徴点と深い畳み込み特徴を組み合わせた非線形強度ソナー画像マッチング法を提案した。この方法には2つの重要な利点があります。(i)自己学習のアイデアに基づいてローカル特徴点に関連するデータサンプルを生成します。 (ii)畳み込みニューラルネットワーク(CNN)とシャムネットワークアーキテクチャを使用して、ソナー画像ペアのローカル位置の類似性を測定します。私たちの方法は、特徴抽出と特徴マッチングの段階をモデルにカプセル化し、画像パッチペアからマッチングラベルへのマッピング関数を直接学習し、ニアエンドツーエンドの方法でマッチングタスクを実行します。特徴マッチング実験は、実際の水中環境で自律型水中ビークル(AUV)によって取得されたソナー画像で実行されます。実験結果は、我々の方法がより良いマッチング効果と強いロバスト性を持っていることを示しています。
With the continuous development of underwater vision technology, more and more remote sensing images could be obtained. In the underwater scene, sonar sensors are currently the most effective remote perception devices, and the sonar images captured by them could provide rich environment information. In order to analyze a certain scene, we often need to merge the sonar images from different periods, various sonar frequencies and distinctive viewpoints. However, the above scenes will bring nonlinear intensity differences to the sonar images, which will make traditional matching methods almost ineffective. This paper proposes a non-linear intensity sonar image matching method that combines local feature points and deep convolution features. This method has two key advantages: (i) we generate data samples related to local feature points based on the self-learning idea; (ii) we use the convolutional neural network (CNN) and Siamese network architecture to measure the similarity of the local position in the sonar image pair. Our method encapsulates the feature extraction and feature matching stage in a model, and directly learns the mapping function from image patch pairs to matching labels, and achieves matching tasks in a near-end-to-end manner. Feature matching experiments are carried out on the sonar images acquired by autonomous underwater vehicle (AUV) in the real underwater environment. Experiment results show that our method has better matching effects and strong robustness.
updated: Wed Dec 15 2021 02:53:03 GMT+0000 (UTC)
published: Wed Nov 17 2021 09:30:43 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト