点群の固有の不規則な分布と離散的な形状表現のため、点群処理に畳み込みニューラルネットワークを利用することは非常に困難です。これらの問題に対処するために、近年、多くの手作りの畳み込みバリアントが出現しています。精巧な設計ではありますが、これらのバリエーションは、離散点によって形成される多様な形状を十分にキャプチャするには最適とは言えません。この論文では、PointSeaConv、つまり点群での新しい微分畳み込み検索パラダイムを提案します。純粋にデータ駆動型の方法で機能できるため、幾何学的形状モデリングに適した畳み込みのグループを自動作成できます。また、内部畳み込みと外部アーキテクチャを同時に検索するための共同最適化フレームワークを提案し、離散化誤差の影響を軽減するためにイプシロン欲張りアルゴリズムを導入します。その結果、畳み込みレベルとアーキテクチャレベルの両方で幾何学的形状をキャプチャするのに十分な深いネットワークであるPointSeaNetで、点群処理を検索できます。広範な実験は、提案されたPointSeaNetが、驚くべきマージンで複数のタスクにわたる挑戦的なベンチマークで現在の手作りのディープモデルを上回っていることを強く証明しています。
Exploiting convolutional neural networks for point cloud processing is quite challenging, due to the inherent irregular distribution and discrete shape representation of point clouds. To address these problems, many handcrafted convolution variants have sprung up in recent years. Though with elaborate design, these variants could be far from optimal in sufficiently capturing diverse shapes formed by discrete points. In this paper, we propose PointSeaConv, i.e., a novel differential convolution search paradigm on point clouds. It can work in a purely data-driven manner and thus is capable of auto-creating a group of suitable convolutions for geometric shape modeling. We also propose a joint optimization framework for simultaneous search of internal convolution and external architecture, and introduce epsilon-greedy algorithm to alleviate the effect of discretization error. As a result, PointSeaNet, a deep network that is sufficient to capture geometric shapes at both convolution level and architecture level, can be searched out for point cloud processing. Extensive experiments strongly evidence that our proposed PointSeaNet surpasses current handcrafted deep models on challenging benchmarks across multiple tasks with remarkable margins.