ニューラルネットワークを使用して点群を視覚化する手法を紹介します。私たちの手法は、任意の点群の即時プレビューを可能にし、悪名高い表面再構成の問題や、スプラットベースのレンダリングの方向付けられた法線を推定する必要性を回避します。プレビュー問題を条件付きの画像から画像への変換タスクとしてキャストし、点群を画像に直接変換するニューラルネットワークを設計します。このニューラルネットワークでは、点群がそこから再構築されたかのように視覚化されます。さらに、視覚化された点群の結果の外観は、オプションで、単純な制御変数(たとえば、色と光)を条件とすることができます。私たちの技術がもっともらしい画像を即座に生成し、オンザフライでノイズ、不均一なサンプリング、薄い表面シートを効果的に処理できることを示します。
We present a technique for visualizing point clouds using a neural network. Our technique allows for an instant preview of any point cloud, and bypasses the notoriously difficult surface reconstruction problem or the need to estimate oriented normals for splat-based rendering. We cast the preview problem as a conditional image-to-image translation task, and design a neural network that translates point depth-map directly into an image, where the point cloud is visualized as though a surface was reconstructed from it. Furthermore, the resulting appearance of the visualized point cloud can be, optionally, conditioned on simple control variables (e.g., color and light). We demonstrate that our technique instantly produces plausible images, and can, on-the-fly effectively handle noise, non-uniform sampling, and thin surfaces sheets.