arXiv reaDer
マルチ画像融合とレイヤー分離のためのニューラル画像表現
Neural Image Representations for Multi-Image Fusion and Layer Separation
暗黙的または座標ベースの神経表現としても知られる神経画像表現(NIR)を使用して、複数の画像を1つのビューに位置合わせおよび融合するためのフレームワークを提案します。私たちのフレームワークは、カメラのエゴモーションとシーンの潜在的な変化を示すバースト画像を対象としています。シーンの動きの性質に応じて、位置合わせのさまざまな戦略について説明します。つまり、透視平面(つまり、ホモグラフィ)、シーンの変化が最小限のオプティカルフロー、および顕著なオクルージョンとディスオクルージョンのあるオプティカルフローです。ニューラル画像表現を使用すると、フレームワークは、参照フレームとして画像の1つを選択する必要なしに、複数の入力を1つの標準ビューに効果的に結合します。このマルチフレームフュージョンフレームワークをさまざまなレイヤー分離タスクに使用する方法を示します。
We propose a framework for aligning and fusing multiple images into a single view using neural image representations (NIRs), also known as implicit or coordinate-based neural representations. Our framework targets burst images that exhibit camera ego motion and potential changes in the scene. We describe different strategies for alignment depending on the nature of the scene motion -- namely, perspective planar (i.e., homography), optical flow with minimal scene change, and optical flow with notable occlusion and disocclusion. With the neural image representation, our framework effectively combines multiple inputs into a single canonical view without the need for selecting one of the images as a reference frame. We demonstrate how to use this multi-frame fusion framework for various layer separation tasks.
updated: Mon Nov 29 2021 22:53:54 GMT+0000 (UTC)
published: Mon Aug 02 2021 22:29:35 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト