車線検出は、自動運転における最も重要なタスクの1つです。さまざまな複雑なシナリオ(たとえば、重度のオクルージョン、あいまいな車線など)と、車線注釈に固有のまばらな監視信号のために、車線検出タスクは依然として困難です。したがって、通常の畳み込みニューラルネットワーク(CNN)が一般的なシーンでトレーニングして、生の画像から微妙な車線の特徴を捉えることは困難です。この論文では、通常のCNNで予備的な特徴抽出を行った後、レーンの特徴を強化するREcurrent Feature-Shift Aggregator(RESA)という名前の新しいモジュールを紹介します。 RESAは、レーンの強い形状の事前分布を利用して、行と列にわたるピクセルの空間的関係をキャプチャします。スライスされたフィーチャマップを垂直方向と水平方向に繰り返しシフトし、各ピクセルがグローバル情報を収集できるようにします。 RESAは、スライスされたフィーチャマップを集約することにより、外観の手がかりが弱い困難なシナリオでレーンを正確に推測できます。さらに、アップサンプリング段階で粗視化と詳細な特徴を組み合わせたバイラテラルアップサンプリングデコーダーを提案します。低解像度の特徴マップをピクセル単位の予測に細心の注意を払って復元できます。私たちの方法は、2つの人気のある車線検出ベンチマーク(CULaneとTusimple)で最先端の結果を達成します。コードはhttps://github.com/ZJULearning/resaで入手できます。
Lane detection is one of the most important tasks in self-driving. Due to various complex scenarios (e.g., severe occlusion, ambiguous lanes, etc.) and the sparse supervisory signals inherent in lane annotations, lane detection task is still challenging. Thus, it is difficult for the ordinary convolutional neural network (CNN) to train in general scenes to catch subtle lane feature from the raw image. In this paper, we present a novel module named REcurrent Feature-Shift Aggregator (RESA) to enrich lane feature after preliminary feature extraction with an ordinary CNN. RESA takes advantage of strong shape priors of lanes and captures spatial relationships of pixels across rows and columns. It shifts sliced feature map recurrently in vertical and horizontal directions and enables each pixel to gather global information. RESA can conjecture lanes accurately in challenging scenarios with weak appearance clues by aggregating sliced feature map. Moreover, we propose a Bilateral Up-Sampling Decoder that combines coarse-grained and fine-detailed features in the up-sampling stage. It can recover the low-resolution feature map into pixel-wise prediction meticulously. Our method achieves state-of-the-art results on two popular lane detection benchmarks (CULane and Tusimple). Code has been made available at: https://github.com/ZJULearning/resa.