arXiv reaDer
Render4Completion:3D形状補完のためのマルチビューデプスマップの合成
Render4Completion: Synthesizing Multi-View Depth Maps for 3D Shape Completion
  マルチビュー深度マップを合成することにより、3D形状の完成のための新しいアプローチを提案します。形状補完の以前の作業は、体積表現、メッシュ、または点群に依存しますが、形状表現として、一連の固定視角からのマルチビュー深度マップを使用することを提案します。これにより、形状の補完を画像から画像への変換の問題にキャストすることにより、体積表現と点群のメモリの制限から解放されます。具体的には、固定された一連の視点から不完全な形状の深度マップをレンダリングし、各ビューで深度マップの補完を実行します。各ビューを個別に完了する画像から画像への変換ネットワークとは異なり、当社の新しいネットワークであるマルチビューコンプリーションネット(MVCN)は、3D形状のすべてのビューからの情報を活用して、各単一ビューの完了を支援します。これにより、MVCNはさまざまな深度ビューからのより多くの情報を活用して、単一深度ビューの完成で高精度を実現し、さまざまなビューで完成した深度画像間の一貫性を維持できます。マルチビュー表現と斬新なネットワーク構造の恩恵を受けて、MVCNは最新技術と比較して大規模ベンチマークでの3D形状完成の精度を大幅に向上させます。
We propose a novel approach for 3D shape completion by synthesizing multi-view depth maps. While previous work for shape completion relies on volumetric representations, meshes, or point clouds, we propose to use multi-view depth maps from a set of fixed viewing angles as our shape representation. This allows us to be free of the limitations of memory for volumetric representations and point clouds by casting shape completion into an image-to-image translation problem. Specifically, we render depth maps of the incomplete shape from a fixed set of viewpoints, and perform depth map completion in each view. Different from image-to-image translation network that completes each view separately, our novel network, multi-view completion net (MVCN), leverages information from all views of a 3D shape to help the completion of each single view. This enables MVCN to leverage more information from different depth views to achieve high accuracy in single depth view completion and keep the consistency among the completed depth images in different views. Benefited by the multi-view representation and the novel network structure, MVCN significantly improves the accuracy of 3D shape completion in large-scale benchmarks compared to the state of the art.
updated: Sat Sep 21 2019 22:25:37 GMT+0000 (UTC)
published: Wed Apr 17 2019 17:07:47 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト