シーンの理解は、セマンティックセグメンテーションに不可欠な手法です。セマンティックセグメンテーションに使用できるデータセットはいくつかありますが、それらは主に大規模なディープニューラルネットワークを使用したセマンティック画像セグメンテーションに焦点を当てています。したがって、これらのネットワークは、特に自動運転システムのリアルタイムアプリケーションには役立ちません。この問題を解決するために、セマンティックセグメンテーションタスクに2つの貢献をします。最初の貢献は、セマンティックビデオデータセットであるHighway Drivingデータセットを紹介することです。これは、セマンティックビデオセグメンテーションタスクの高密度に注釈が付けられたベンチマークです。 Highway Drivingデータセットは、30Hzのフレームレートを持つ20のビデオシーケンスで構成されており、すべてのフレームに高密度の注釈が付けられています。次に、時間的相関を利用するベースラインアルゴリズムを提案します。時間的相関を分析する試みとともに、高速道路運転データセットがセマンティックビデオセグメンテーションの研究を促進することを期待しています。
Scene understanding is an essential technique in semantic segmentation. Although there exist several datasets that can be used for semantic segmentation, they are mainly focused on semantic image segmentation with large deep neural networks. Therefore, these networks are not useful for real time applications, especially in autonomous driving systems. In order to solve this problem, we make two contributions to semantic segmentation task. The first contribution is that we introduce the semantic video dataset, the Highway Driving dataset, which is a densely annotated benchmark for a semantic video segmentation task. The Highway Driving dataset consists of 20 video sequences having a 30Hz frame rate, and every frame is densely annotated. Secondly, we propose a baseline algorithm that utilizes a temporal correlation. Together with our attempt to analyze the temporal correlation, we expect the Highway Driving dataset to encourage research on semantic video segmentation.