大規模信号の効率的な高解像度表現のために設計された新しい神経信号表現を紹介します。マルチスケール陰的神経表現(MINER)の重要な革新は、ラプラシアンピラミッドを介した内部表現です。これは、スケール間で信号の直交部分をキャプチャする信号のスパースマルチスケール表現を提供します。小さなMLPを使用して、各スケールでピラミッドの小さな互いに素なパッチを表すことにより、ラプラシアンピラミッドの利点を活用します。これにより、ネットワークの容量を粗いスケールから細かいスケールに適応的に増加させ、強い信号エネルギーを持つ信号の一部のみを表すことができます。各MLPのパラメーターは、粗いスケールから細かいスケールまで最適化されているため、粗いスケールでの近似が速くなり、最終的には非常に高速なトレーニングプロセスになります。 MINERは、ギガピクセル画像や非常に大きな点群など、さまざまな大規模な信号表現タスクに適用され、必要なパラメーターは25%未満、メモリフットプリントは33%、計算時間は10%であることを示しています。同じ表現エラーに到達するためのACORNなどの競合する手法の例。
We introduce a new neural signal representation designed for the efficient high-resolution representation of large-scale signals. The key innovation in our multiscale implicit neural representation (MINER) is an internal representation via a Laplacian pyramid, which provides a sparse multiscale representation of the signal that captures orthogonal parts of the signal across scales. We leverage the advantages of the Laplacian pyramid by representing small disjoint patches of the pyramid at each scale with a tiny MLP. This enables the capacity of the network to adaptively increase from coarse to fine scales, and only represent parts of the signal with strong signal energy. The parameters of each MLP are optimized from coarse-to-fine scale which results in faster approximations at coarser scales, thereby ultimately an extremely fast training process. We apply MINER to a range of large-scale signal representation tasks, including gigapixel images and very large point clouds, and demonstrate that it requires fewer than 25% of the parameters, 33% of the memory footprint, and 10% of the computation time of competing techniques such as ACORN to reach the same representation error.