arXiv reaDer
デプスマップを使用した自然画像のステッチ
Natural Image Stitching Using Depth Maps
自然画像スティッチング(NIS)は、異なる表示位置から同じ3Dシーンをキャプチャする2つの重なり合う画像から1つの自然に見えるモザイクを作成することを目的としています。シーンが非平面でカメラのベースラインが広い場合、視差が無視できなくなるため、必然的に課題が発生します。本論文では、重複領域と非重複領域の両方で視差に対して自然に見えるモザイクを生成する深度マップを使用する新しいNIS手法を提案します。まず、特徴の一致とその深度値に基づいて、ピクセルからピクセルへの変換を推定します。次に、ターゲット画像の三角形分割を描画し、頂点の位置と修正された深度値に基づいて、三角形ごとに1つずつ、複数のローカルホモグラフィを推定します。最後に、ワーピング画像は区分的ホモグラフィの後方マッピングによって合成されます。実験結果は、提案された方法が重なり合う領域で正確な位置合わせを提供するだけでなく、重なり合わない領域で仮想的な自然さも提供することを示しています。
Natural image stitching (NIS) aims to create one natural-looking mosaic from two overlapping images that capture a same 3D scene from different viewing positions. Challenges inevitably arise when the scene is non-planar and the camera baseline is wide, since parallax becomes not negligible in such cases. In this paper, we propose a novel NIS method using depth maps, which generates natural-looking mosaics against parallax in both overlapping and non-overlapping regions. Firstly, we estimate a pixel-to-pixel transformation based on feature matches and their depth values. Then, we draw a triangulation of the target image and estimate multiple local homographies, one per triangle, based on the locations of their vertices and the rectified depth values. Finally, the warping image is composited by the backward mapping of piece-wise homographies. Experimental results demonstrate that the proposed method not only provides accurate alignment in the overlapping regions, but also virtual naturalness in the non-overlapping region.
updated: Sun Feb 13 2022 10:05:53 GMT+0000 (UTC)
published: Sun Feb 13 2022 10:05:53 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト