arXiv reaDer
Multi-Task Learning for Automotive Foggy Scene Understanding via Domain Adaptation to an Illumination-Invariant Representation
  自動車用途のシーンの共同理解とセグメンテーションは、2つの重要な側面において困難な問題です。(1)シーン全体のすべてのピクセルを分類し、(2)不安定な天候と照明の変化(霧のような天候)でこのタスクを実行します。屋外シーンの視界が悪い。この不十分な屋外シーンの可視性は、深い畳み込みニューラルネットワークベースのシーンの理解とセグメンテーションの最適でないパフォーマンスにつながります。この論文では、領域適応と照明不変画像ごとの変換を使用して、霧の多い天候条件下での効率的なエンドツーエンドの現代的な自動車のセマンティックシーン理解アプローチを提案します。マルチタスクパイプラインとして、提案されたモデルは以下を提供します。(1)ドメイン転送アプローチを使用して極端な状態から晴天状態に画像を転送し、(2)競合するエンコーダーデコーダー畳み込みニューラルネットワーク(CNN)を使用してシーンを意味的にセグメント化します密な接続、スキップ接続、融合ベースの技術。合成データセット(Foggy Cityscapes)や実世界のデータセット(Foggy ZurichおよびFoggy Driving)を含む、難易度の高い霧の多いデータセットに対するアプローチを評価します。 RGB、深度、および照明不変の情報を組み込むことにより、霧の多い気象条件の下で、自動車のシーンの理解において最先端のアプローチよりも優れたアプローチを実現します。
Joint scene understanding and segmentation for automotive applications is a challenging problem in two key aspects:- (1) classifying every pixel in the entire scene and (2) performing this task under unstable weather and illumination changes (e.g. foggy weather), which results in poor outdoor scene visibility. This poor outdoor scene visibility leads to a non-optimal performance of deep convolutional neural network-based scene understanding and segmentation. In this paper, we propose an efficient end-to-end contemporary automotive semantic scene understanding approach under foggy weather conditions, employing domain adaptation and illumination-invariant image per-transformation. As a multi-task pipeline, our proposed model provides:- (1) transferring images from extreme to clear-weather condition using domain transfer approach and (2) semantically segmenting a scene using a competitive encoder-decoder convolutional neural network (CNN) with dense connectivity, skip connections and fusion-based techniques. We evaluate our approach on challenging foggy datasets, including synthetic dataset (Foggy Cityscapes) as well as real-world datasets (Foggy Zurich and Foggy Driving). By incorporating RGB, depth, and illumination-invariant information, our approach outperforms the state-of-the-art within automotive scene understanding, under foggy weather condition.
updated: Tue Sep 17 2019 10:18:14 GMT+0000 (UTC)
published: Tue Sep 17 2019 10:18:14 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト