arXiv reaDer
EventPoint:イベントカメラの自己教師ありローカル記述子学習
EventPoint: Self-Supervised Local Descriptor Learning for Event Cameras
フレームベースのイベントデータに対して自己教師あり学習法を使用してインタレストポイントと記述子を抽出する方法を提案します。これはEventPointと呼ばれます。イベントデータの他の特徴抽出方法とは異なり、実際のイベント形式の駆動データセット(提案した自己教師あり学習方法を使用したDSEC)でモデルをトレーニングします。トレーニングの進行状況では、イベントデータの特性を十分に考慮します。私たちの仕事では、いくつかの完全な評価を実施しました。DARTをエミュレートし、N-caltech101データセットで特徴マッチング実験を実行しました。結果は、EventPointの効果がDARTよりも優れていることを示しています。 UZHが提供するVid2eツールを使用して、オックスフォードのロボットカーデータをイベントベースの形式に変換し、提供されたINS情報と組み合わせて、SLAMで重要なグローバルポーズ推定実験を実行します。私たちの知る限り、これはこのやりがいのあるタスクを実行する最初の作業です。十分な実験データは、EventPointがCPUでリアルタイムを達成しながら、より良い結果を得ることができることを示しています。
We proposes a method of extracting intrest points and descriptors using self-supervised learning method on frame-based event data, which is called EventPoint. Different from other feature extraction methods on event data, we train our model on real event-form driving dataset--DSEC with the self-supervised learning method we proposed, the training progress fully consider the characteristics of event data.To verify the effectiveness of our work,we conducted several complete evaluations: we emulated DART and carried out feature matching experiments on N-caltech101 dataset, the results shows that the effect of EventPoint is better than DART; We use Vid2e tool provided by UZH to convert Oxford robotcar data into event-based format, and combined with INS information provided to carry out the global pose estimation experiment which is important in SLAM. As far as we know, this is the first work to carry out this challenging task.Sufficient experimental data show that EventPoint can get better results while achieve real time on CPU.
updated: Mon Sep 13 2021 11:43:40 GMT+0000 (UTC)
published: Wed Sep 01 2021 06:58:14 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト