arXiv reaDer
2D 前方視ソナーベースのマルチビュー ステレオのための疑似前方深度の学習
Learning Pseudo Front Depth for 2D Forward-Looking Sonar-based Multi-view Stereo
2D 前方視ソナーからの音響画像で不足している寸法情報を取得することは、水中ロボット工学の分野ではよく知られている問題です。ロボットがフライスルー モーションで 3D マップを生成できるように、1 つの画像から 3D 情報を取得しようとする作品があります。ただし、独自の画像定式化原理により、単一の画像から 3D 情報を推定することは、深刻なあいまいさの問題に直面します。マルチビュー ステレオの従来の方法では、あいまいさの問題を回避できますが、正確なモデルを生成するには多数の視点が必要になる場合があります。この作業では、3D 情報を推定するための新しい学習ベースのマルチビュー ステレオ法を提案します。複数のフレームからの情報をより有効に利用するために、仰角平面スイープ法を提案して、深さ-方位角-仰角コスト ボリュームを生成します。正則化後のボリュームは、ターゲットの確率的ボリューム表現と見なすことができます。仰角の回帰を実行する代わりに、コスト ボリュームから疑似フロント深度を使用して 3D 情報を表現し、音響イメージングにおける 2D-3D 問題を回避できます。わずか 2 ~ 3 枚の画像で高精度の結果を生成できます。合成データセットは、さまざまな水中ターゲットをシミュレートするために生成されました。また、大規模な水槽で正確なグラウンド トゥルースを使用した最初の実際のデータセットを構築しました。実験結果は、他の最先端の方法と比較して、私たちの方法の優位性を示しています。
Retrieving the missing dimension information in acoustic images from 2D forward-looking sonar is a well-known problem in the field of underwater robotics. There are works attempting to retrieve 3D information from a single image which allows the robot to generate 3D maps with fly-through motion. However, owing to the unique image formulation principle, estimating 3D information from a single image faces severe ambiguity problems. Classical methods of multi-view stereo can avoid the ambiguity problems, but may require a large number of viewpoints to generate an accurate model. In this work, we propose a novel learning-based multi-view stereo method to estimate 3D information. To better utilize the information from multiple frames, an elevation plane sweeping method is proposed to generate the depth-azimuth-elevation cost volume. The volume after regularization can be considered as a probabilistic volumetric representation of the target. Instead of performing regression on the elevation angles, we use pseudo front depth from the cost volume to represent the 3D information which can avoid the 2D-3D problem in acoustic imaging. High-accuracy results can be generated with only two or three images. Synthetic datasets were generated to simulate various underwater targets. We also built the first real dataset with accurate ground truth in a large scale water tank. Experimental results demonstrate the superiority of our method, compared to other state-of-the-art methods.
updated: Sat Jul 30 2022 14:35:21 GMT+0000 (UTC)
published: Sat Jul 30 2022 14:35:21 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト