arXiv reaDer
立体画像超解像のためのクロスビュー階層ネットワーク
Cross-View Hierarchy Network for Stereo Image Super-Resolution
ステレオ イメージの超解像は、ビュー全体で補完的な情報を活用することにより、高解像度のステレオ イメージ ペアの品質を向上させることを目的としています。優れたパフォーマンスを達成するために、多くの方法は、ビュー間で同様の情報を融合する複雑なモジュールの設計を優先してきましたが、高解像度再構成のためのビュー内情報の重要性を見落としています。また、復元された画像のテクスチャが正しくないという問題も発生します。この問題に対処するために、ビュー内のさまざまな階層間の相互依存性を調査し、ステレオ イメージ超解像度 (CVHSSR) のクロス ビュー階層ネットワークという名前の新しい方法を提案します。具体的には、チャネルアテンションと大規模なカーネル畳み込みアテンションを活用してイントラビューからグローバルとローカルの両方の特徴を抽出し、正確なテクスチャの詳細を効率的に復元できる階層間情報マイニングブロック (CHIMB) を設計します。さらに、クロス ビュー インタラクション モジュール (CVIM) が提案され、クロス ビュー アテンション メカニズムを利用して異なるビューから類似の機能を融合し、両眼シーンに効果的に適応します。広範な実験により、この方法の有効性が実証されています。 CVHSSR は、より少ないパラメータを使用しながら、他の最先端の方法よりも最高のステレオ画像超解像性能を実現します。ソース コードと事前トレーニング済みのモデルは、https://github.com/AlexZou14/CVHSSR で入手できます。
Stereo image super-resolution aims to improve the quality of high-resolution stereo image pairs by exploiting complementary information across views. To attain superior performance, many methods have prioritized designing complex modules to fuse similar information across views, yet overlooking the importance of intra-view information for high-resolution reconstruction. It also leads to problems of wrong texture in recovered images. To address this issue, we explore the interdependencies between various hierarchies from intra-view and propose a novel method, named Cross-View-Hierarchy Network for Stereo Image Super-Resolution (CVHSSR). Specifically, we design a cross-hierarchy information mining block (CHIMB) that leverages channel attention and large kernel convolution attention to extract both global and local features from the intra-view, enabling the efficient restoration of accurate texture details. Additionally, a cross-view interaction module (CVIM) is proposed to fuse similar features from different views by utilizing cross-view attention mechanisms, effectively adapting to the binocular scene. Extensive experiments demonstrate the effectiveness of our method. CVHSSR achieves the best stereo image super-resolution performance than other state-of-the-art methods while using fewer parameters. The source code and pre-trained models are available at https://github.com/AlexZou14/CVHSSR.
updated: Thu Apr 13 2023 03:11:30 GMT+0000 (UTC)
published: Thu Apr 13 2023 03:11:30 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト