暗黙的ニューラル表現 (INR) は、任意スケールの画像超解像 (SR) の一般的なアプローチです。INR の重要なコンポーネントとして、位置エンコーディングはその表現能力を向上させます。位置エンコーディングに動機付けられて、位置エンコーディングの拡張である直交位置エンコーディング (OPE) と、INR ベースのアップサンプリング モジュールを任意スケールの画像超解像に置き換える OPE アップスケール モジュールを提案します。 INR と同様に、OPE-Upscale モジュールは 2D 座標と潜在コードを入力として受け取ります。ただし、トレーニング パラメータは必要ありません。このパラメータ不要の機能により、OPE アップスケール モジュールは線形結合演算を直接実行して連続的に画像を再構成し、任意スケールの画像再構成を実現できます。簡潔なSRフレームワークとして、私たちの方法は計算効率が高く、最新技術(SOTA)と比較してメモリ消費量が少ないことが、広範な実験と評価によって確認されています。さらに、私たちの方法は、任意スケールの画像超解像で SOTA と同等の結果をもたらします。最後になりましたが、OPE が一連の直交基底に対応することを示し、設計原則を正当化します。
Implicit neural representation (INR) is a popular approach for arbitrary-scale image super-resolution (SR), as a key component of INR, position encoding improves its representation ability. Motivated by position encoding, we propose orthogonal position encoding (OPE) - an extension of position encoding - and an OPE-Upscale module to replace the INR-based upsampling module for arbitrary-scale image super-resolution. Same as INR, our OPE-Upscale Module takes 2D coordinates and latent code as inputs; however it does not require training parameters. This parameter-free feature allows the OPE-Upscale Module to directly perform linear combination operations to reconstruct an image in a continuous manner, achieving an arbitrary-scale image reconstruction. As a concise SR framework, our method has high computing efficiency and consumes less memory comparing to the state-of-the-art (SOTA), which has been confirmed by extensive experiments and evaluations. In addition, our method has comparable results with SOTA in arbitrary scale image super-resolution. Last but not the least, we show that OPE corresponds to a set of orthogonal basis, justifying our design principle.