セマンティックセグメンテーションの最近の進歩とともに、トレーニング環境と展開環境の間のドメインギャップを克服するために多くのドメイン適応方法が提案されています。ただし、これまでのほとんどの研究では、ソース/ターゲットデータセットの限られた組み合わせが使用されており、ドメイン適応手法が、より困難で多様なターゲットドメインのセットで完全に評価されたことはありません。この作品は、インターネットから収集された野生のロードシーンビデオのドメイン適応技術をベンチマークするための新しいマルチドメインデータセットDRIV100を提示します。データセットは、2つの基準に基づいてさまざまなシーン/ドメインをカバーするために選択された100本のビデオのピクセルレベルの注釈で構成されています。人間の主観的判断と既存の道路シーンデータセットを使用して判断された異常スコア。ビデオごとに手動でラベル付けされた複数のグラウンドトゥルースフレームを提供し、各ビデオが独立してターゲットドメインとして機能するビデオレベルのドメイン適応の徹底的な評価を可能にします。データセットを使用して、最先端の方法のドメイン適応パフォーマンスを定量化し、ドメイン適応技術の潜在的で新しい課題を明らかにします。データセットはhttps://doi.org/10.5281/zenodo.4389243で入手できます。
Together with the recent advances in semantic segmentation, many domain adaptation methods have been proposed to overcome the domain gap between training and deployment environments. However, most previous studies use limited combinations of source/target datasets, and domain adaptation techniques have never been thoroughly evaluated in a more challenging and diverse set of target domains. This work presents a new multi-domain dataset DRIV100 for benchmarking domain adaptation techniques on in-the-wild road-scene videos collected from the Internet. The dataset consists of pixel-level annotations for 100 videos selected to cover diverse scenes/domains based on two criteria; human subjective judgment and an anomaly score judged using an existing road-scene dataset. We provide multiple manually labeled ground-truth frames for each video, enabling a thorough evaluation of video-level domain adaptation where each video independently serves as the target domain. Using the dataset, we quantify domain adaptation performances of state-of-the-art methods and clarify the potential and novel challenges of domain adaptation techniques. The dataset is available at https://doi.org/10.5281/zenodo.4389243.