arXiv reaDer
任意の入出力帯域設定におけるハイパースペクトル画像の超解像
Hyperspectral Image Super-Resolution in Arbitrary Input-Output Band Settings
狭いスペクトルバンドを持つハイパースペクトル画像(HSI)は、豊富なスペクトル情報をキャプチャできますが、その過程で空間分解能が犠牲になります。最近、多くの機械学習ベースのHSI超解像(SR)アルゴリズムが提案されています。ただし、これらのアプローチの基本的な制限の1つは、画像とカメラの設定に大きく依存し、ある特定の設定の入力HSIを別の設定の出力HSIにマッピングすることしか学習できないことです。ただし、HSIカメラの多様性により、カメラが異なれば、スペクトル応答関数とバンド数も異なります。その結果、既存の機械学習ベースのアプローチでは、さまざまな入出力帯域設定に対してHSIを超解像することを学習できません。任意の数の入力帯域のピーク波長でHSI画像を取り込み、任意の数の出力帯域のピーク波長でSR HSIを生成できる単一のメタ学習ベースの超解像(MLSR)モデルを提案します。 NTIRE2020およびICVLデータセットを活用して、MLSRモデルのパフォーマンスをトレーニングおよび検証します。結果は、提案された単一のモデルが、任意の入出力帯域設定で超解像HSI帯域を正常に生成できることを示しています。結果は、特定の入出力帯域設定で個別にトレーニングされたベースラインよりも優れているか、少なくとも同等です。
Hyperspectral image (HSI) with narrow spectral bands can capture rich spectral information, but it sacrifices its spatial resolution in the process. Many machine-learning-based HSI super-resolution (SR) algorithms have been proposed recently. However, one of the fundamental limitations of these approaches is that they are highly dependent on image and camera settings and can only learn to map an input HSI with one specific setting to an output HSI with another. However, different cameras capture images with different spectral response functions and bands numbers due to the diversity of HSI cameras. Consequently, the existing machine-learning-based approaches fail to learn to super-resolve HSIs for a wide variety of input-output band settings. We propose a single Meta-Learning-Based Super-Resolution (MLSR) model, which can take in HSI images at an arbitrary number of input bands' peak wavelengths and generate SR HSIs with an arbitrary number of output bands' peak wavelengths. We leverage NTIRE2020 and ICVL datasets to train and validate the performance of the MLSR model. The results show that the single proposed model can successfully generate super-resolved HSI bands at arbitrary input-output band settings. The results are better or at least comparable to baselines that are separately trained on a specific input-output band setting.
updated: Sun Aug 15 2021 15:03:25 GMT+0000 (UTC)
published: Fri Mar 19 2021 03:32:28 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト