arXiv reaDer
時空間グラフカットによるイベントベースのモーションセグメンテーション
Event-based Motion Segmentation with Spatio-Temporal Graph Cuts
独立して動くオブジェクトを識別することは、動的なシーンを理解するための重要なタスクです。ただし、動的なシーンで使用される従来のカメラは、サンプリングの原理により、モーションブラーや露出のアーティファクトに悩まされる可能性があります。対照的に、イベントベースのカメラは、そのような制限を克服するための利点を提供する新しいバイオインスパイアードセンサーです。ピクセル単位の強度変化を非同期で報告するため、シーンのダイナミクスとまったく同じ速度で視覚情報を取得できます。イベントベースのカメラで取得した独立して動く物体を識別する方法、つまりイベントベースのモーションセグメンテーション問題を解決する方法を開発しました。この論文では、エネルギー最小化を介して問題を弱く制約されたマルチモデルフィッティングとして定式化する方法と、その2つのサブ問題(イベントクラスター割り当て(ラベリング)とモーションモデルフィッティング)を反復的に解決する方法について説明します。時空間グラフの形式で入力イベントの時空間構造を活用することによって。利用可能なデータセットでの実験は、さまざまなモーションパターンと移動オブジェクトの数を持つシーンでの方法の多様性を示しています。評価は、この方法が、予想される移動物体の数を事前に決定する必要なしに、最先端技術と同等またはそれ以上の性能を発揮することを示しています。
Identifying independently moving objects is an essential task for dynamic scene understanding. However, traditional cameras used in dynamic scenes may suffer from motion blur or exposure artifacts due to their sampling principle. By contrast, event-based cameras are novel bio-inspired sensors that offer advantages to overcome such limitations. They report pixel-wise intensity changes asynchronously, which enables them to acquire visual information at exactly the same rate as the scene dynamics. We have developed a method to identify independently moving objects acquired with an event-based camera, i.e., to solve the event-based motion segmentation problem. This paper describes how to formulate the problem as a weakly-constrained multi-model fitting one via energy minimization, and how to jointly solve its two subproblems -- event-cluster assignment (labeling) and motion model fitting -- in an iterative manner, by exploiting the spatio-temporal structure of input events in the form of a space-time graph. Experiments on available datasets demonstrate the versatility of the method in scenes with different motion patterns and number of moving objects. The evaluation shows that the method performs on par or better than the state of the art without having to predetermine the number of expected moving objects.
updated: Wed Dec 16 2020 04:06:02 GMT+0000 (UTC)
published: Wed Dec 16 2020 04:06:02 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト