ディープラーニングは、生の感覚入力から自動運転車を制御するためのエンドツーエンドのニューラルネットワーク学習を実証するために使用されています。 LiDARセンサーは信頼性の高い正確な情報を提供しますが、3Dデータの処理には大きなメモリフットプリントと計算コストが必要なため、既存のエンドツーエンドの運転ソリューションは主にカメラに基づいています。一方、これらのシステムの堅牢性を高めることも重要です。ただし、モデルの不確実性を推定することでさえ、サンプリングベースの方法のコストのために非常に困難です。このホワイトペーパーでは、効率的で堅牢なLiDARベースのエンドツーエンドナビゲーションフレームワークを紹介します。最初に、スパース畳み込みカーネル最適化とハードウェア対応モデル設計に基づくFast-LiDARNetを紹介します。次に、単一のフォワードパスのみから予測の不確実性を直接推定し、制御予測をインテリジェントに融合するハイブリッドエビデンシャルフュージョンを提案します。実物大の車両でシステムを評価し、車線安定性とナビゲーション機能を実証します。配布外のイベント(センサーの障害など)が存在する場合、当社のシステムは堅牢性を大幅に向上させ、現実の世界での乗っ取りの数を減らします。
Deep learning has been used to demonstrate end-to-end neural network learning for autonomous vehicle control from raw sensory input. While LiDAR sensors provide reliably accurate information, existing end-to-end driving solutions are mainly based on cameras since processing 3D data requires a large memory footprint and computation cost. On the other hand, increasing the robustness of these systems is also critical; however, even estimating the model's uncertainty is very challenging due to the cost of sampling-based methods. In this paper, we present an efficient and robust LiDAR-based end-to-end navigation framework. We first introduce Fast-LiDARNet that is based on sparse convolution kernel optimization and hardware-aware model design. We then propose Hybrid Evidential Fusion that directly estimates the uncertainty of the prediction from only a single forward pass and then fuses the control predictions intelligently. We evaluate our system on a full-scale vehicle and demonstrate lane-stable as well as navigation capabilities. In the presence of out-of-distribution events (e.g., sensor failures), our system significantly improves robustness and reduces the number of takeovers in the real world.