arXiv reaDer
マルチ画像融合とレイヤー分離のためのニューラル画像表現
Neural Image Representations for Multi-Image Fusion and Layer Separation
複数の画像を単一の座標ベースの神経表現に整列および融合するためのフレームワークを提案します。私たちのフレームワークは、カメラのエゴの動きやシーンの小さな変化が原因で位置がずれているバースト画像を対象としています。シーンの動きの仮定に応じて、アライメントのさまざまな戦略、つまり、透視平面(つまり、ホモグラフィ)、シーンの変化が最小限のオプティカルフロー、および顕著なオクルージョンとディスオクルージョンのあるオプティカルフローについて説明します。私たちのフレームワークは、参照フレームとして画像の1つを選択する必要なしに、複数の入力を1つの神経陰関数に効果的に結合します。このマルチフレームフュージョンフレームワークをさまざまなレイヤー分離タスクに使用する方法を示します。
We propose a framework for aligning and fusing multiple images into a single coordinate-based neural representations. Our framework targets burst images that have misalignment due to camera ego motion and small changes in the scene. We describe different strategies for alignment depending on the assumption of the scene motion, namely, perspective planar (i.e., homography), optical flow with minimal scene change, and optical flow with notable occlusion and disocclusion. Our framework effectively combines the multiple inputs into a single neural implicit function without the need for selecting one of the images as a reference frame. We demonstrate how to use this multi-frame fusion framework for various layer separation tasks.
updated: Mon Aug 02 2021 22:29:35 GMT+0000 (UTC)
published: Mon Aug 02 2021 22:29:35 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト