車線マーキングを近似曲線として識別するプロセスである車線検出は、自動運転車の車線逸脱警報および適応型クルーズコントロールに広く使用されています。 2つのステップでそれを解決する人気のあるパイプライン---特徴抽出と後処理は有用ですが、グローバルコンテキストとレーンの長くて薄い構造を学習するには非効率的で欠陥があります。これらの問題に取り組むために、トランスフォーマーで構築されたネットワークを使用して車線形状モデルのパラメーターを直接出力するエンドツーエンドの方法を提案し、より豊富な構造とコンテキストを学習します。車線形状モデルは、道路構造とカメラポーズに基づいて定式化され、ネットワーク出力のパラメータの物理的解釈を提供します。トランスフォーマーは、自己注意メカニズムを使用して非ローカルな相互作用をモデル化し、細い構造とグローバルなコンテキストをキャプチャします。提案された方法はTuSimpleベンチマークで検証され、最も軽量なモデルサイズと最速の速度で最先端の精度を示します。さらに、私たちの方法は、挑戦的な自己収集レーン検出データセットへの優れた適応性を示し、実際のアプリケーションでの強力な展開の可能性を示しています。コードはhttps://github.com/liuruijin17/LSTRで入手できます。
Lane detection, the process of identifying lane markings as approximated curves, is widely used for lane departure warning and adaptive cruise control in autonomous vehicles. The popular pipeline that solves it in two steps---feature extraction plus post-processing, while useful, is too inefficient and flawed in learning the global context and lanes' long and thin structures. To tackle these issues, we propose an end-to-end method that directly outputs parameters of a lane shape model, using a network built with a transformer to learn richer structures and context. The lane shape model is formulated based on road structures and camera pose, providing physical interpretation for parameters of network output. The transformer models non-local interactions with a self-attention mechanism to capture slender structures and global context. The proposed method is validated on the TuSimple benchmark and shows state-of-the-art accuracy with the most lightweight model size and fastest speed. Additionally, our method shows excellent adaptability to a challenging self-collected lane detection dataset, showing its powerful deployment potential in real applications. Codes are available at https://github.com/liuruijin17/LSTR.