arXiv reaDer
UnScene3D: 屋内シーンの教師なし 3D インスタンス セグメンテーション
UnScene3D: Unsupervised 3D Instance Segmentation for Indoor Scenes
3D インスタンス セグメンテーションは、私たちの周りの世界を幾何学的に理解するための基本です。 3D シーンのインスタンス セグメンテーションの既存の方法は、高価な手動の 3D 注釈による監視に依存しています。屋内スキャンのクラスにとらわれない 3D インスタンス セグメンテーションのための最初の完全に教師なし 3D 学習アプローチである UnScene3D を提案します。 UnScene3D はまず、自己管理された色とジオメトリの機能を利用して潜在的なオブジェクト領域を見つけることにより、疑似マスクを生成します。幾何学的なオーバーセグメンテーションに基づいて動作し、高解像度 3D データでの効率的な表現と学習を可能にします。大まかな提案は、予測に基づいてモデルを自己トレーニングすることで洗練されます。私たちのアプローチは、最先端の教師なし 3D インスタンス セグメンテーション方法よりも平均精度スコアが 300% 以上向上し、挑戦的で雑然とした 3D シーンでも効果的なインスタンス セグメンテーションを示しています。
3D instance segmentation is fundamental to geometric understanding of the world around us. Existing methods for instance segmentation of 3D scenes rely on supervision from expensive, manual 3D annotations. We propose UnScene3D, the first fully unsupervised 3D learning approach for class-agnostic 3D instance segmentation of indoor scans. UnScene3D first generates pseudo masks by leveraging self-supervised color and geometry features to find potential object regions. We operate on a basis of geometric oversegmentation, enabling efficient representation and learning on high-resolution 3D data. The coarse proposals are then refined through self-training our model on its predictions. Our approach improves over state-of-the-art unsupervised 3D instance segmentation methods by more than 300% Average Precision score, demonstrating effective instance segmentation even in challenging, cluttered 3D scenes.
updated: Tue Apr 30 2024 17:24:00 GMT+0000 (UTC)
published: Sat Mar 25 2023 19:15:16 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト