arXiv reaDer
距離場を使用したイベント ビジョン パターン追跡のための連続時間ガウス プロセス動作補償
Continuous-Time Gaussian Process Motion-Compensation for Event-vision Pattern Tracking with Distance Fields
この作業は、イベント カメラ データの動き補償とパターン トラッキングの問題に対処します。イベント カメラは、観測された強度の変化に応じて、各ピクセルによって個別にトリガーされるイベントの非同期ストリームを生成します。従来のビジョンアルゴリズムはこのセンシングモダリティに直接適用できないため、このような型破りなデータは、低照度および急速な動きのシナリオで大きな利点を提供し、重要な研究課題を提示します。提案された方法は、追跡問題をローカル SE(2) 動き補償ステップに分解し、その後に小さな動き補償イベント バッチのホモグラフィ登録を行います。最初のコンポーネントは、ガウス過程 (GP) 理論に依存して、イメージ プレーン内のイベントの連続占有フィールドをモデル化し、カメラの軌跡を共分散カーネル関数に埋め込みます。そうすることで、軌跡の推定は、データの対数限界尤度を最大化することにより、GP ハイパーパラメーター学習と同様に行われます。連続占有フィールドは距離フィールドに変換され、ホモグラフィ ベースのレジストレーションのテンプレートとして使用されます。提案された方法を他の最先端技術に対してベンチマークすることにより、オープンソースの実装が高精度の動き補償を実行し、現実世界のシナリオで高品質のトラックを生成することを示します。
This work addresses the issue of motion compensation and pattern tracking in event camera data. An event camera generates asynchronous streams of events triggered independently by each of the pixels upon changes in the observed intensity. Providing great advantages in low-light and rapid-motion scenarios, such unconventional data present significant research challenges as traditional vision algorithms are not directly applicable to this sensing modality. The proposed method decomposes the tracking problem into a local SE(2) motion-compensation step followed by a homography registration of small motion-compensated event batches. The first component relies on Gaussian Process (GP) theory to model the continuous occupancy field of the events in the image plane and embed the camera trajectory in the covariance kernel function. In doing so, estimating the trajectory is done similarly to GP hyperparameter learning by maximising the log marginal likelihood of the data. The continuous occupancy fields are turned into distance fields and used as templates for homography-based registration. By benchmarking the proposed method against other state-of-the-art techniques, we show that our open-source implementation performs high-accuracy motion compensation and produces high-quality tracks in real-world scenarios.
updated: Sun Mar 05 2023 13:48:20 GMT+0000 (UTC)
published: Sun Mar 05 2023 13:48:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト