周囲のシーンを正確に認識することは、ロボットが合理的な判断と行動をとるのに役立ちます。したがって、効果的なシーン表現と認識方法を開発することは、ロボット工学において非常に重要です。現在、多くの研究が、屋内シーン認識能力を向上させるための新しい補助機能とネットワークの開発に焦点を合わせています。ただし、屋内シーン認識のためにオブジェクトの特徴と関係を直接構築することに焦点を当てているものはほとんどありません。本論文では、現在の方法の弱点を分析し、オブジェクトの特徴を抽出し、オブジェクトの関係を学習して屋内シーンを認識するオブジェクトからシーンへの(OTS)方法を提案します。提案されたOTSは、最初にセグメンテーションネットワークと提案されたオブジェクト特徴集約モジュール(OFAM)に基づいてオブジェクト特徴を抽出します。その後、オブジェクト関係が計算され、提案されたオブジェクト注意モジュール(OAM)とグローバル関係集約モジュール(GRAM)に基づいてシーン表現が構築されます。この作業の最終結果は、OTSがオブジェクトの特徴を正常に抽出し、セグメンテーションネットワークからオブジェクトの関係を学習することを示しています。さらに、OTSは、追加のストリームを使用せずに、屋内シーン認識で最先端の方法を2%以上上回っています。コードはhttps://github.com/FreeformRobotics/OTSで公開されています。
Accurate perception of the surrounding scene is helpful for robots to make reasonable judgments and behaviours. Therefore, developing effective scene representation and recognition methods are of significant importance in robotics. Currently, a large body of research focuses on developing novel auxiliary features and networks to improve indoor scene recognition ability. However, few of them focus on directly constructing object features and relations for indoor scene recognition. In this paper, we analyze the weaknesses of current methods and propose an Object-to-Scene (OTS) method, which extracts object features and learns object relations to recognize indoor scenes. The proposed OTS first extracts object features based on the segmentation network and the proposed object feature aggregation module (OFAM). Afterwards, the object relations are calculated and the scene representation is constructed based on the proposed object attention module (OAM) and global relation aggregation module (GRAM). The final results in this work show that OTS successfully extracts object features and learns object relations from the segmentation network. Moreover, OTS outperforms the state-of-the-art methods by more than 2% on indoor scene recognition without using any additional streams. Code is publicly available at: https://github.com/FreeformRobotics/OTS.