arXiv reaDer
ニューラル フーリエ フィルター バンク
Neural Fourier Filter Bank
効率的で非常に詳細な再構成を提供するための新しい方法を提示します。ウェーブレットに触発された私たちの主なアイデアは、信号を空間的および周波数的に分解するニューラル フィールドを学習することです。空間分解のための最近のグリッドベースのパラダイムに従いますが、既存の研究とは異なり、フーリエ特徴エンコーディングを介して特定の周波数を各グリッドに格納することをお勧めします。次に、正弦活性化を伴う多層パーセプトロンを適用し、これらのフーリエ エンコードされた特徴を適切な層に取り込んで、高周波成分が低周波成分の上に順次蓄積されるようにし、それらを合計して最終出力を形成します。 2D 画像フィッティング、3D 形状再構成、神経放射場など、モデルのコンパクトさと複数のタスクでの効率性に関して、私たちの方法が最新技術よりも優れていることを実証します。
We present a novel method to provide efficient and highly detailed reconstructions. Inspired by wavelets, our main idea is to learn a neural field that decompose the signal both spatially and frequency-wise. We follow the recent grid-based paradigm for spatial decomposition, but unlike existing work, encourage specific frequencies to be stored in each grid via Fourier features encodings. We then apply a multi-layer perceptron with sine activations, taking these Fourier encoded features in at appropriate layers so that higher-frequency components are accumulated on top of lower-frequency components sequentially, which we sum up to form the final output. We demonstrate that our method outperforms the state of the art regarding model compactness and efficiency on multiple tasks: 2D image fitting, 3D shape reconstruction, and neural radiance fields.
updated: Sun Dec 04 2022 03:45:08 GMT+0000 (UTC)
published: Sun Dec 04 2022 03:45:08 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト