arXiv reaDer
単一の 360° 画像からの顕著性ベースの複数の関心領域の検出
Saliency-based Multiple Region of Interest Detection from a Single 360° image
360° 画像は有益です。カメラ周辺の全方向の視覚情報が含まれています。ただし、360° 画像をカバーする領域は人間の視野よりもはるかに大きいため、さまざまな方向の重要な情報を見落としがちです。この問題に取り組むために、視覚的顕著性を手がかりとして使用して、単一の 360° 画像から関心領域 (RoI) の最適なセットを予測する方法を提案します。既存の単一の 360° 画像顕著性予測データセットの乏しく、強くバイアスされたトレーニング データに対処するために、球状ランダム データ回転に基づくデータ拡張方法も提案します。予測された顕著性マップと冗長候補領域から、領域内の顕著性と領域間の Interaction-Over-Union (IoU) の両方を考慮して、RoI の最適なセットを取得します。主観評価を行い,提案手法が入力 360° 画像を適切に要約する領域を選択できることを示す.
360° images are informative -- it contains omnidirectional visual information around the camera. However, the areas that cover a 360° image is much larger than the human's field of view, therefore important information in different view directions is easily overlooked. To tackle this issue, we propose a method for predicting the optimal set of Region of Interest (RoI) from a single 360° image using the visual saliency as a clue. To deal with the scarce, strongly biased training data of existing single 360° image saliency prediction dataset, we also propose a data augmentation method based on the spherical random data rotation. From the predicted saliency map and redundant candidate regions, we obtain the optimal set of RoIs considering both the saliency within a region and the Interaction-Over-Union (IoU) between regions. We conduct the subjective evaluation to show that the proposed method can select regions that properly summarize the input 360° image.
updated: Thu Sep 08 2022 09:06:13 GMT+0000 (UTC)
published: Thu Sep 08 2022 09:06:13 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト