arXiv reaDer
PointRNN: Point Recurrent Neural Network for Moving Point Cloud Processing
 このホワイトペーパーでは、ポイントクラウド処理を移動するためのポイントリカレントニューラルネットワーク(PointRNN)を紹介します。各タイムステップで、PointRNNは入力としてポイント座標P∈R^ n×3とポイントフィーチャX∈R^ n×dを取ります(nとdはそれぞれポイントの数とフィーチャチャネルの数を示します)。 PointRNNの状態は、点座標Pと点状態S∈R^ n×d '(d'は状態チャネルの数を示します)で構成されます。同様に、PointRNNの出力はPと新しいポイントフィーチャY∈R^ n×d ''で構成されます(d ''は新しいフィーチャチャネルの数を示します)。点群は無秩序なので、2つのタイムステップからの点の特徴と状態は直接操作できません。したがって、ポイントベースの時空間的にローカルな相関関係を採用して、ポイント座標に従ってポイントフィーチャと状態を集約します。さらに、PointRNNの2つのバリアント、つまり、Point Gated Recurrent Unit(PointGRU)とPoint Long Short-Term Memory(PointLSTM)を提案します。 PointRNN、PointGRU、およびPointLSTMを移動ポイントクラウド予測に適用します。これは、履歴の動きを考慮して、セット内のポイントの将来の軌跡を予測することを目的としています。実験結果は、PointRNN、PointGRU、PointLSTMが合成データセットと実際のデータセットの両方で正しい予測を生成できることを示しており、ポイントクラウドシーケンスをモデル化する能力を実証しています。コードはでリリースされています。
In this paper, we introduce a Point Recurrent Neural Network (PointRNN) for moving point cloud processing. At each time step, PointRNN takes point coordinates P ∈R^n ×3 and point features X ∈R^n ×d as input (n and d denote the number of points and the number of feature channels, respectively). The state of PointRNN is composed of point coordinates P and point states S ∈R^n ×d' (d' denotes the number of state channels). Similarly, the output of PointRNN is composed of P and new point features Y ∈R^n ×d'' (d'' denotes the number of new feature channels). Since point clouds are orderless, point features and states from two time steps can not be directly operated. Therefore, a point-based spatiotemporally-local correlation is adopted to aggregate point features and states according to point coordinates. We further propose two variants of PointRNN, i.e., Point Gated Recurrent Unit (PointGRU) and Point Long Short-Term Memory (PointLSTM). We apply PointRNN, PointGRU and PointLSTM to moving point cloud prediction, which aims to predict the future trajectories of points in a set given their history movements. Experimental results show that PointRNN, PointGRU and PointLSTM are able to produce correct predictions on both synthetic and real-world datasets, demonstrating their ability to model point cloud sequences. The code has been released at
updated: Sun Nov 24 2019 12:26:29 GMT+0000 (UTC)
published: Fri Oct 18 2019 07:21:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト