サンプリングされたポイントおよびボクセル法は通常、密なイベントを疎なイベントにダウンサンプリングするために使用されます。その後、疎な点/ボクセルをノードとして扱い、グラフ ニューラル ネットワーク (GNN) を採用してイベント データの表現を学習するグラフ モデルを利用するのが一般的な方法です。しかし、良好なパフォーマンスが得られるとはいえ、主に 2 つの問題により、その成果は依然として限定的です。 (1) 既存のイベント GNN は通常、追加の最大 (または平均) プーリング層を採用して、すべてのノードの埋め込みをイベント データ表現全体の単一のグラフ レベル表現に要約します。ただし、このアプローチではグラフ ノードの重要性を捉えることができず、またノード表現を完全に認識することもできません。 (2) 既存の方法は一般に、スパースポイントまたはボクセルグラフ表現モデルのいずれかを採用しているため、これら 2 つのタイプの表現モデル間の相補性についての考慮が欠けています。これらの問題に対処するために、イベント ストリーム データ表現のための新しいデュアル ポイント ボクセル吸収グラフ表現学習を提案します。具体的には、入力イベント ストリームが与えられると、まずそれを疎イベント クラウドとボクセル グリッドに変換し、それぞれに対して二重吸収グラフ モデルを構築します。次に、二重吸収グラフ表現と学習のための新しい吸収グラフ畳み込みネットワーク (AGCN) を設計します。提案された AGCN の重要な側面は、ノードの重要性を効果的に取得できるため、導入された吸収ノードを通じてすべてのノード表現を要約する際にノード表現を完全に認識できることです。複数のイベントベースの分類ベンチマーク データセットに対する広範な実験により、フレームワークの有効性が完全に検証されました。
Sampled point and voxel methods are usually employed to downsample the dense events into sparse ones. After that, one popular way is to leverage a graph model which treats the sparse points/voxels as nodes and adopts graph neural networks (GNNs) to learn the representation of event data. Although good performance can be obtained, however, their results are still limited mainly due to two issues. (1) Existing event GNNs generally adopt the additional max (or mean) pooling layer to summarize all node embeddings into a single graph-level representation for the whole event data representation. However, this approach fails to capture the importance of graph nodes and also fails to be fully aware of the node representations. (2) Existing methods generally employ either a sparse point or voxel graph representation model which thus lacks consideration of the complementary between these two types of representation models. To address these issues, we propose a novel dual point-voxel absorbing graph representation learning for event stream data representation. To be specific, given the input event stream, we first transform it into the sparse event cloud and voxel grids and build dual absorbing graph models for them respectively. Then, we design a novel absorbing graph convolutional network (AGCN) for our dual absorbing graph representation and learning. The key aspect of the proposed AGCN is its ability to effectively capture the importance of nodes and thus be fully aware of node representations in summarizing all node representations through the introduced absorbing nodes. Extensive experiments on multiple event-based classification benchmark datasets fully validated the effectiveness of our framework.