arXiv reaDer
空間角度密度ネットワークを介した効率的なライトフィールド再構成
Efficient Light Field Reconstruction via Spatio-Angular Dense Network
画像検知機器として、ライトフィールド画像は単眼画像と比較して追加の角度情報を提供でき、幅広い測定アプリケーションを容易にしました。ライトフィールド画像キャプチャデバイスは、通常、角度解像度と空間解像度の間の固有のトレードオフに悩まされています。この問題に取り組むために、ライトフィールドの再構築やライトフィールドの超解像などのいくつかの方法が提案されていますが、ドメインの非対称性と効率的な情報の流れという2つの問題は未解決のままです。この論文では、2つの新しいコンポーネント、すなわち相関ブロックとそれらに対処するための空間角度高密度スキップ接続を使用したライトフィールド再構成のためのエンドツーエンド空間角度高密度ネットワーク(SADenseNet)を提案します。前者は、ドメインの非対称性に準拠する方法で相関情報の効果的なモデリングを実行します。後者は、2つのドメイン内の情報フローを強化する3種類の接続で構成されています。実世界のデータセットと合成データセットの両方で広範な実験が行われ、メモリと計算のコストが大幅に削減された、提案されたSADenseNetの最先端のパフォーマンスが実証されました。定性的な結果は、再構成されたライトフィールド画像が正確な詳細で鮮明であり、関連する測定アプリケーションの精度を向上させるための前処理として機能できることを示しています。
As an image sensing instrument, light field images can supply extra angular information compared with monocular images and have facilitated a wide range of measurement applications. Light field image capturing devices usually suffer from the inherent trade-off between the angular and spatial resolutions. To tackle this problem, several methods, such as light field reconstruction and light field super-resolution, have been proposed but leaving two problems unaddressed, namely domain asymmetry and efficient information flow. In this paper, we propose an end-to-end Spatio-Angular Dense Network (SADenseNet) for light field reconstruction with two novel components, namely correlation blocks and spatio-angular dense skip connections to address them. The former performs effective modeling of the correlation information in a way that conforms with the domain asymmetry. And the latter consists of three kinds of connections enhancing the information flow within two domains. Extensive experiments on both real-world and synthetic datasets have been conducted to demonstrate that the proposed SADenseNet's state-of-the-art performance at significantly reduced costs in memory and computation. The qualitative results show that the reconstructed light field images are sharp with correct details and can serve as pre-processing to improve the accuracy of related measurement applications.
updated: Sun Aug 08 2021 13:50:51 GMT+0000 (UTC)
published: Sun Aug 08 2021 13:50:51 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト