arXiv reaDer
BuFF: 光制約付き 3D 再構成のためのバースト機能ファインダー
BuFF: Burst Feature Finder for Light-Constrained 3D Reconstruction
従来のビジョン カメラを使用して夜間に動作するロボットは、画像のノイズが制限されているため、再構築において大きな課題に直面しています。以前の研究では、バースト イメージング技術を使用してこの問題を部分的に克服できることが実証されています。この論文では、非常に暗い条件下での視覚ベースの再構成を強化する画像バーストに直接作用する新しい特徴検出器を開発します。私たちのアプローチは、マルチスケールおよびマルチモーション空間で共同検索することにより、各バースト内で明確に定義されたスケールと見かけのモーションを持つキーポイントを見つけます。これらの特徴は、画像の S/N 比が高い段階で記述されるため、検出された特徴は、従来のノイズの多い画像やバーストマージされた画像の最先端技術よりも正確であり、高い精度を示します。 、そしてマッチング性能。改善された機能のパフォーマンスとカメラのポーズの推定を示し、困難な光に制約されたシーンで機能検出器を使用して、動きからの構造のパフォーマンスの改善を示します。当社の機能ファインダーは、低照度シナリオで動作するロボットや、夜間の動作を含むアプリケーションに向けた重要な一歩を提供します。
Robots operating at night using conventional vision cameras face significant challenges in reconstruction due to noise-limited images. Previous work has demonstrated that burst-imaging techniques can be used to partially overcome this issue. In this paper, we develop a novel feature detector that operates directly on image bursts that enhances vision-based reconstruction under extremely low-light conditions. Our approach finds keypoints with well-defined scale and apparent motion within each burst by jointly searching in a multi-scale and multi-motion space. Because we describe these features at a stage where the images have higher signal-to-noise ratio, the detected features are more accurate than the state-of-the-art on conventional noisy images and burst-merged images and exhibit high precision, recall, and matching performance. We show improved feature performance and camera pose estimates and demonstrate improved structure-from-motion performance using our feature detector in challenging light-constrained scenes. Our feature finder provides a significant step towards robots operating in low-light scenarios and applications including night-time operations.
updated: Tue Sep 20 2022 05:06:33 GMT+0000 (UTC)
published: Tue Sep 20 2022 05:06:33 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト