arXiv reaDer
イベントガイド付き深度センシング
Event Guided Depth Sensing
構造化光、LIDAR、飛行時間システムなどのアクティブ深度センサーは、固定スキャンレートでシーン全体の深度を均一にサンプリングします。これにより、冗長な静的情報がオーバーサンプリングされ、貴重なモーション情報がアンダーサンプリングされる可能性がある、制限された時空間分解能が発生します。この論文では、効率的なバイオインスパイアードイベントカメラ駆動深度推定アルゴリズムを提示します。私たちのアプローチでは、イベントカメラによって検出されたシーンアクティビティに応じて、関心のある領域を動的に密に照らし、動きのない視野内の領域をまばらに照らします。深度推定は、シーンからのレーザーの反射を検出するように調整された2番目のイベントベースのセンサーと結合されたレーザーポイントプロジェクターで構成されるイベントベースの構造化光システムによって実現されます。プロトタイプを使用して、シミュレートされた自動運転シナリオと実際の屋内シーケンスでのアプローチの実現可能性を示します。自動運転や屋内環境などの自然のシーンでは、移動するエッジがシーンの平均10%未満に相当することを示しています。したがって、私たちのセットアップでは、センサーがシーンの10%のみをスキャンする必要があります。これにより、照明源による消費電力がほぼ90%削減される可能性があります。イベントベースの構造化光システムの評価と概念実証を提示しますが、ここで提示するアイデアは、LIDAR、飛行時間、標準ステレオなどの幅広い深度検知モダリティに適用できます。
Active depth sensors like structured light, lidar, and time-of-flight systems sample the depth of the entire scene uniformly at a fixed scan rate. This leads to limited spatio-temporal resolution where redundant static information is over-sampled and precious motion information might be under-sampled. In this paper, we present an efficient bio-inspired event-camera-driven depth estimation algorithm. In our approach, we dynamically illuminate areas of interest densely, depending on the scene activity detected by the event camera, and sparsely illuminate areas in the field of view with no motion. The depth estimation is achieved by an event-based structured light system consisting of a laser point projector coupled with a second event-based sensor tuned to detect the reflection of the laser from the scene. We show the feasibility of our approach in a simulated autonomous driving scenario and real indoor sequences using our prototype. We show that, in natural scenes like autonomous driving and indoor environments, moving edges correspond to less than 10% of the scene on average. Thus our setup requires the sensor to scan only 10% of the scene, which could lead to almost 90% less power consumption by the illumination source. While we present the evaluation and proof-of-concept for an event-based structured-light system, the ideas presented here are applicable for a wide range of depth-sensing modalities like LIDAR, time-of-flight, and standard stereo.
updated: Wed Oct 20 2021 11:41:11 GMT+0000 (UTC)
published: Wed Oct 20 2021 11:41:11 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト