arXiv reaDer
LiDAR鳥瞰図でのシミュレーションから実際のドメインへのシフトを削減するためのサイクルとセマンティックの一貫した敵対的ドメインの適応
Cycle and Semantic Consistent Adversarial Domain Adaptation for Reducing Simulation-to-Real Domain Shift in LiDAR Bird's Eye View
LiDAR情報に基づくオブジェクト検出方法のパフォーマンスは、トレーニングデータの可用性に大きく影響され、通常は特定のレーザーデバイスに限定されます。その結果、センサーの仕様と運転シナリオの両方をアドホックに生成できるため、ニューラルネットワークモデルのトレーニング時に合成データの使用が一般的になりつつあります。ただし、現在のシミュレータでは実際のLiDAR操作を完全に模倣することはできないため、仮想環境と実際の環境の間のギャップを埋めることは依然として未解決の課題です。この問題に取り組むために、通常、ドメイン適応戦略が適用され、距離ビュー(RV)および鳥瞰図(BEV)の投影に適用すると、車両の検出で顕著な結果が得られますが、小規模な道路エージェントでは失敗します。この論文では、ドメイン適応プロセス中に関心のある小さなオブジェクトの情報を保存するために、事前のセマンティック分類を使用するCycleGANに基づくBEVドメイン適応方法を提示します。生成されたBEVの品質は、KITTI3Dオブジェクト検出ベンチマークで最先端の3Dオブジェクト検出フレームワークを使用して評価されています。得られた結果は、既存の代替案に対する提案された方法の利点を示しています。
The performance of object detection methods based on LiDAR information is heavily impacted by the availability of training data, usually limited to certain laser devices. As a result, the use of synthetic data is becoming popular when training neural network models, as both sensor specifications and driving scenarios can be generated ad-hoc. However, bridging the gap between virtual and real environments is still an open challenge, as current simulators cannot completely mimic real LiDAR operation. To tackle this issue, domain adaptation strategies are usually applied, obtaining remarkable results on vehicle detection when applied to range view (RV) and bird's eye view (BEV) projections while failing for smaller road agents. In this paper, we present a BEV domain adaptation method based on CycleGAN that uses prior semantic classification in order to preserve the information of small objects of interest during the domain adaptation process. The quality of the generated BEVs has been evaluated using a state-of-the-art 3D object detection framework at KITTI 3D Object Detection Benchmark. The obtained results show the advantages of the proposed method over the existing alternatives.
updated: Thu Apr 22 2021 12:47:37 GMT+0000 (UTC)
published: Thu Apr 22 2021 12:47:37 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト