arXiv reaDer
Multi-FAN: Multi-Spectral Mosaic Super-Resolution Via Multi-Scale Feature Aggregation Network
 この論文では、マルチスペクトルカメラとしても知られる、最新のリアルタイムシングルショットモザイクイメージセンサーでキャプチャされたマルチスペクトル画像を超解像する新しい方法を紹介します。私たちの貢献は2つあります。まず、考慮に入れることができますモザイク画像ではなく、画像キューブ、から私たちの超決意マルチスペクトル画像は、空間は、各波長のオフセット。第二に、超解像(SR)ネットワーク全体で機能マップを異なるレベルの意味情報と連結する外部マルチスケール機能集約ネットワーク(Multi-FAN)を導入します。畳み込み層のカスケードは、暗黙的にモザイク画像を生成するための最も貴重な特徴マップを選択します。このモザイク画像は、定量的に優れた画像を生成するSRネットワークによって生成されたモザイク画像とマージされます。私たちは、最先端のSRアルゴリズムであるRCANに、当社のマルチFAN(残留チャンネルアテンション・ネットワーク)を、適用します。 Multi-FANは、定量結果と推論時間の両方を改善することを示しています。
This paper introduces a novel method to super-resolve multi-spectral images captured by modern real-time single-shot mosaic image sensors, also known as multi-spectral cameras. Our contribution is two-fold. Firstly, we super-resolve multi-spectral images from mosaic images rather than image cubes, which helps to take into account the spatial offset of each wavelength. Secondly, we introduce an external multi-scale feature aggregation network (Multi-FAN) which concatenates the feature maps with different levels of semantic information throughout a super-resolution (SR) network. A cascade of convolutional layers then implicitly selects the most valuable feature maps to generate a mosaic image. This mosaic image is then merged with the mosaic image generated by the SR network to produce a quantitatively superior image. We apply our Multi-FAN to RCAN (Residual Channel Attention Network), which is the state-of-the-art SR algorithm. We show that Multi-FAN improves both quantitative results and well as inference time.
updated: Wed Nov 06 2019 05:52:55 GMT+0000 (UTC)
published: Tue Sep 17 2019 03:53:20 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト