近年、半教師あり学習と3D部屋レイアウトの再構築の両方に関する研究が盛んに行われています。この作業では、これら2つのフィールドの共通部分を調査して、ラベル付けされていないデータでより正確な3D屋内シーンモデリングを可能にするという研究目的を前進させます。 360 ^∘パノラマシーンでのレイアウト推定を改善するために、ラベル付きデータとラベルなしデータの組み合わせを使用して、部屋のコーナーと境界の表現を学習する最初のアプローチを提案します。広範な比較実験を通じて、私たちのアプローチは、わずか20のラベル付きの例を使用して、複雑な屋内シーンのレイアウト推定を進めることができることを示しています。合成データで事前トレーニングされたレイアウト予測子と組み合わせると、半教師ありの方法は、ラベルの12%のみを使用して完全に教師ありの対応する方法と一致します。私たちの仕事は、限られたラベル付きデータで3D知覚の多くのアプリケーションを可能にする、堅牢な半教師ありレイアウト推定に向けた重要な第一歩を踏み出しました。
Recent years have seen flourishing research on both semi-supervised learning and 3D room layout reconstruction. In this work, we explore the intersection of these two fields to advance the research objective of enabling more accurate 3D indoor scene modeling with less labeled data. We propose the first approach to learn representations of room corners and boundaries by using a combination of labeled and unlabeled data for improved layout estimation in a 360^∘ panoramic scene. Through extensive comparative experiments, we demonstrate that our approach can advance layout estimation of complex indoor scenes using as few as 20 labeled examples. When coupled with a layout predictor pre-trained on synthetic data, our semi-supervised method matches the fully supervised counterpart using only 12% of the labels. Our work takes an important first step towards robust semi-supervised layout estimation that can enable many applications in 3D perception with limited labeled data.