arXiv reaDer
Technical Report: Co-learning of geometry and semantics for online 3D mapping
 このペーパーは、Semantic 3D Reconstruction Tylecek2018rmsに関するECCV 2018 3DRMSワークショップチャレンジへの提出に関する技術レポートです。この論文では、深度マップとセマンティックセグメンテーションの共学習を使用して、自律航法の3Dセマンティック再構築に取り組んでいます。パイプラインの中心は、深さを厳密に調整し、正確なセマンティックセグメンテーションマップを生成する、ディープマルチタスクニューラルネットワークです。その入力は、標準ステレオビジョンによって画像のペアから生成された画像と生の深度マップです。次に、結果のセマンティック3Dポイントクラウドをマージして、一貫した3Dメッシュを作成し、これを使用して密なセマンティック3D再構成マップを作成します。提案された方法の各ステップのパフォーマンスは、3DRMS Challengeのデータセットと複数のタスクで評価され、最先端のアプローチを繰り返し上回っています。
This paper is a technical report about our submission for the ECCV 2018 3DRMS Workshop Challenge on Semantic 3D Reconstruction Tylecek2018rms. In this paper, we address 3D semantic reconstruction for autonomous navigation using co-learning of depth map and semantic segmentation. The core of our pipeline is a deep multi-task neural network which tightly refines depth and also produces accurate semantic segmentation maps. Its inputs are an image and a raw depth map produced from a pair of images by standard stereo vision. The resulting semantic 3D point clouds are then merged in order to create a consistent 3D mesh, in turn used to produce dense semantic 3D reconstruction maps. The performances of each step of the proposed method are evaluated on the dataset and multiple tasks of the 3DRMS Challenge, and repeatedly surpass state-of-the-art approaches.
updated: Mon Nov 04 2019 09:19:17 GMT+0000 (UTC)
published: Mon Nov 04 2019 09:19:17 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト