この論文では、点群を完成させるための、敵対的レンダリングを備えた新しいスタイルベースのポイントジェネレータ(SpareNet)を提案しました。最初に、チャネルに注意を払うEdgeConvを提示して、ローカル構造とポイントフィーチャのグローバル形状を完全に活用します。第二に、バニラの折り畳みによって使用される連結方法が、複雑で忠実な形状を生成する可能性を制限することを観察します。 StyleGANの成功によって啓発された私たちは、形状機能を、折り畳み中に正規化レイヤーを変調するスタイルコードと見なし、その機能を大幅に強化します。第三に、既存のポイント監視、たとえば面取り距離やアースムーバーの距離は、再構築されたポイントの知覚品質を忠実に反映できないことを認識しています。これに対処するために、微分可能なレンダラーを使用して完成したポイントを深度マップに投影し、敵対的なトレーニングを適用して、さまざまな視点での知覚的リアリズムを提唱することを提案します。 ShapeNetとKITTIでの包括的な実験により、優れた視覚品質を提供しながら最先端の定量的パフォーマンスを実現する当社の方法の有効性が証明されています。
In this paper, we proposed a novel Style-based Point Generator with Adversarial Rendering (SpareNet) for point cloud completion. Firstly, we present the channel-attentive EdgeConv to fully exploit the local structures as well as the global shape in point features. Secondly, we observe that the concatenation manner used by vanilla foldings limits its potential of generating a complex and faithful shape. Enlightened by the success of StyleGAN, we regard the shape feature as style code that modulates the normalization layers during the folding, which considerably enhances its capability. Thirdly, we realize that existing point supervisions, e.g., Chamfer Distance or Earth Mover's Distance, cannot faithfully reflect the perceptual quality of the reconstructed points. To address this, we propose to project the completed points to depth maps with a differentiable renderer and apply adversarial training to advocate the perceptual realism under different viewpoints. Comprehensive experiments on ShapeNet and KITTI prove the effectiveness of our method, which achieves state-of-the-art quantitative performance while offering superior visual quality.