arXiv reaDer
モデル圧縮によるニューラル3Dシーン圧縮
Neural 3D Scene Compression via Model Compression
3Dシーンをレンダリングするには、シーンから任意の視点にアクセスする必要があります。このような3Dシーンの保存は、2つの方法で行うことができます。 (1)補間によってシーンを再構築できる3Dシーンから取得した2D画像を保存するか、(2)すべての方向からのビューを既にエンコードしている3Dシーン自体の表現を保存します。これまでのところ、従来の3D圧縮方法は、最初のタイプのストレージに焦点を当てており、画像圧縮技術を使用して元の2D画像を圧縮していました。このアプローチでは、ユーザーは最初に保存された2D画像をデコードし、次に3Dシーンをレンダリングします。ただし、大量の2D画像を保存する必要があるため、この分離された手順は非効率的です。この作業では、別のアプローチを取り、3Dシーンの機能表現を圧縮します。特に、シーンを神経放射輝度フィールドとして表すニューラルネットワークを圧縮することにより、3Dシーンを圧縮する方法を紹介します。私たちの方法は、2D画像を保存しないため、3Dシーンのより効率的な保存を提供します。これは、神経機能表現からシーンをレンダリングするときに冗長になります。
Rendering 3D scenes requires access to arbitrary viewpoints from the scene. Storage of such a 3D scene can be done in two ways; (1) storing 2D images taken from the 3D scene that can reconstruct the scene back through interpolations, or (2) storing a representation of the 3D scene itself that already encodes views from all directions. So far, traditional 3D compression methods have focused on the first type of storage and compressed the original 2D images with image compression techniques. With this approach, the user first decodes the stored 2D images and then renders the 3D scene. However, this separated procedure is inefficient since a large amount of 2D images have to be stored. In this work, we take a different approach and compress a functional representation of 3D scenes. In particular, we introduce a method to compress 3D scenes by compressing the neural networks that represent the scenes as neural radiance fields. Our method provides more efficient storage of 3D scenes since it does not store 2D images -- which are redundant when we render the scene from the neural functional representation.
updated: Fri May 07 2021 08:50:00 GMT+0000 (UTC)
published: Fri May 07 2021 08:50:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト