シーン認識は、ロボット知覚の基本的なタスクです。人間にとって、シーン認識は、実世界のオブジェクト知識が豊富であるため、合理的です。事前のオブジェクト知識を人間からシーン認識に転送するというアイデアは重要ですが、それでもあまり活用されていません。本論文では、屋内シーン表現のために意味のあるオブジェクト表現を利用することを提案する。まず、屋内シーンに関連する豊富なオブジェクトカテゴリを使用して、ADE20Kデータセットで事前トレーニングされたシーン解析アルゴリズムを導入することにより、オブジェクト知識を強化するベースラインとして改良オブジェクトモデル(IOM)を利用します。オブジェクトの共起とペアワイズオブジェクト関係を分析するために、ベイズの観点からIOMをベイズオブジェクト関係モデル(BORM)として定式化します。一方、提案されたBORMをPlacesCNNモデルにシーン認識用の結合ベイズオブジェクト関係モデル(CBORM)として組み込み、縮小されたPlaces365データセットおよびSUNRGB-Dデータセットの最新の方法を再トレーニングなしで大幅に上回ります。 、提案された方法の優れた一般化能力を示す。コードはhttps://github.com/hszhoushen/bormにあります。
Scene recognition is a fundamental task in robotic perception. For human beings, scene recognition is reasonable because they have abundant object knowledge of the real world. The idea of transferring prior object knowledge from humans to scene recognition is significant but still less exploited. In this paper, we propose to utilize meaningful object representations for indoor scene representation. First, we utilize an improved object model (IOM) as a baseline that enriches the object knowledge by introducing a scene parsing algorithm pretrained on the ADE20K dataset with rich object categories related to the indoor scene. To analyze the object co-occurrences and pairwise object relations, we formulate the IOM from a Bayesian perspective as the Bayesian object relation model (BORM). Meanwhile, we incorporate the proposed BORM with the PlacesCNN model as the combined Bayesian object relation model (CBORM) for scene recognition and significantly outperforms the state-of-the-art methods on the reduced Places365 dataset, and SUN RGB-D dataset without retraining, showing the excellent generalization ability of the proposed method. Code can be found at https://github.com/hszhoushen/borm.