リアルタイムのポイントクラウド処理は、多くのコンピュータービジョンタスクの基本ですが、リソースが制限されたエッジデバイスの計算問題には依然として挑戦しています。この問題に対処するために、効率的な点群処理のためにXNOR-Netベースのバイナリニューラルネットワーク(BNN)を実装しますが、ガウス分布の重みと学習不可能なスケールファクターという、2つの主な欠点のためにパフォーマンスが大幅に低下します。この論文では、効率的な点群処理のために、期待値最大化(POEM)に基づくポイントごとの操作をBNNに導入します。 EMアルゴリズムは、ロバストなバイモーダル分布の重みを効率的に制約できます。 1ビットの完全接続(Bi-FC)レイヤーの表現能力を強化するために、学習可能なスケールファクターを計算するために、適切に設計された再構成損失を導きます。広範な実験により、私たちのPOEMは、既存の最先端のバイナリポイントクラウドネットワークを最大6.7%と大幅に上回っています。
Real-time point cloud processing is fundamental for lots of computer vision tasks, while still challenged by the computational problem on resource-limited edge devices. To address this issue, we implement XNOR-Net-based binary neural networks (BNNs) for an efficient point cloud processing, but its performance is severely suffered due to two main drawbacks, Gaussian-distributed weights and non-learnable scale factor. In this paper, we introduce point-wise operations based on Expectation-Maximization (POEM) into BNNs for efficient point cloud processing. The EM algorithm can efficiently constrain weights for a robust bi-modal distribution. We lead a well-designed reconstruction loss to calculate learnable scale factors to enhance the representation capacity of 1-bit fully-connected (Bi-FC) layers. Extensive experiments demonstrate that our POEM surpasses existing the state-of-the-art binary point cloud networks by a significant margin, up to 6.7 %.