arXiv reaDer
SteReFo: Efficient Image Refocusing with Stereo Vision
  特定のオブジェクトに視聴者の注意を引き付けるか、奥行きの印象を与えるか、または人間のようなシーンの知覚を単に再現するかどうかにかかわらず、浅い被写界深度画像はプロとアマチュアの写真家によって広く使用されています。そのため、DSLRカメラでは高品質の光学システムを使用して、特定の深度平面に焦点を合わせながら、視覚的に心地よいボケを生成します。通常、モバイルカメラで取得される全焦点ステレオ画像からこの効果を模倣するために、物理的に動機付けられたパイプラインを提案します。リアルタイムアプリケーションを可能にするために、KITTI画像の76 FPSで事後的に焦点面を変更することができます。ポートマントーが示唆するように、SteReFoはステレオベースの深度推定とリフォーカスを効率的に相互に関連付けます。他のアプローチとは対照的に、当社のパイプラインは、シーンコンテンツに対して完全に差別化可能で、物理的に動機付けられ、不可知論的です。また、静止画像のリフォーカスに加えて、移動するオブジェクトの計算ビデオフォーカストラッキングが可能になります。公開されているデータセットSceneFlow、KITTI、CityScapesでアプローチを評価し、アーキテクチャの変更の品質を定量化します。
Whether to attract viewer attention to a particular object, give the impression of depth or simply reproduce human-like scene perception, shallow depth of field images are used extensively by professional and amateur photographers alike. To this end, high quality optical systems are used in DSLR cameras to focus on a specific depth plane while producing visually pleasing bokeh. We propose a physically motivated pipeline to mimic this effect from all-in-focus stereo images, typically retrieved by mobile cameras. It is capable to change the focal plane a posteriori at 76 FPS on KITTI images to enable real-time applications. As our portmanteau suggests, SteReFo interrelates stereo-based depth estimation and refocusing efficiently. In contrast to other approaches, our pipeline is simultaneously fully differentiable, physically motivated, and agnostic to scene content. It also enables computational video focus tracking for moving objects in addition to refocusing of static images. We evaluate our approach on the publicly available datasets SceneFlow, KITTI, CityScapes and quantify the quality of architectural changes.
updated: Sun Sep 29 2019 23:12:16 GMT+0000 (UTC)
published: Sun Sep 29 2019 23:12:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト