自動運転車のリリースに関する安全性検証要件の増加に伴い、従来の実世界のテストに加えて、シミュレーションベースのテストなどの代替アプローチが登場しています。仮想テストに依存するには、採用されているセンサーモデルを検証する必要があります。このため、特定の忠実度が目的の使用に十分であるかどうかを判断するために、シミュレーションと現実の間の不一致を定量化する必要があります。自動運転のためのレーダー知覚のこのシミュレーションと現実のギャップを測定するための適切な方法はありません。明示的および暗黙的なセンサーモデル評価の組み合わせで構成される多層評価アプローチを導入することにより、この問題に対処します。前者は、合成的に生成されたセンサーデータのリアリズムを直接評価し、後者は、ダウンストリームのターゲットアプリケーションの評価を参照します。この方法を実証するために、3つの典型的なレーダーモデルタイプ(理想、データ駆動、レイトレーシングベース)の忠実度と、レーダーベースのマルチオブジェクトトラッキングを仮想的にテストするためのそれらの適用性を評価しました。既存の視差を可視化し、さまざまなシナリオにわたる全体的なモデルの忠実度の現実的な推定を可能にする詳細なセンサーモデル評価を提供するという点で、提案されたアプローチの有効性を示しました。
With the increasing safety validation requirements for the release of a self-driving car, alternative approaches, such as simulation-based testing, are emerging in addition to conventional real-world testing. In order to rely on virtual tests the employed sensor models have to be validated. For this reason, it is necessary to quantify the discrepancy between simulation and reality in order to determine whether a certain fidelity is sufficient for a desired intended use. There exists no sound method to measure this simulation-to-reality gap of radar perception for autonomous driving. We address this problem by introducing a multi-layered evaluation approach, which consists of a combination of an explicit and an implicit sensor model evaluation. The former directly evaluates the realism of the synthetically generated sensor data, while the latter refers to an evaluation of a downstream target application. In order to demonstrate the method, we evaluated the fidelity of three typical radar model types (ideal, data-driven, ray tracing-based) and their applicability for virtually testing radar-based multi-object tracking. We have shown the effectiveness of the proposed approach in terms of providing an in-depth sensor model assessment that renders existing disparities visible and enables a realistic estimation of the overall model fidelity across different scenarios.