arXiv reaDer
拡張歩行者の注意に基づく敵対的外観学習
Attention-based Adversarial Appearance Learning of Augmented Pedestrians
合成データは、自動運転の分野ですでに機械学習ベースの知覚に不可欠な要素になっています。それでも、sim2realドメインシフトのため、実際のデータを完全に置き換えることはできません。この作業では、歩行者認識タスクの現実的なデータを合成するために、増強プロセスと敵対的トレーニングの利点を活用する方法を提案します。私たちのアプローチは、ドメインの不一致を学習し、sim2realの適応を改善するために、敵対的な損失によって引き起こされる注意メカニズムを利用します。私たちの実験は、提案された適応方法がそのような不一致に対してロバストであることを確認し、視覚的リアリズムと意味的一貫性の両方を明らかにします。さらに、歩行者認識のタスクでデータ生成パイプラインを評価し、生成されたデータが実際のドメインのプロパティに似ていることを示します。
Synthetic data became already an essential component of machine learning-based perception in the field of autonomous driving. Yet it still cannot replace real data completely due to the sim2real domain shift. In this work, we propose a method that leverages the advantages of the augmentation process and adversarial training to synthesize realistic data for the pedestrian recognition task. Our approach utilizes an attention mechanism driven by an adversarial loss to learn domain discrepancies and improve sim2real adaptation. Our experiments confirm that the proposed adaptation method is robust to such discrepancies and reveals both visual realism and semantic consistency. Furthermore, we evaluate our data generation pipeline on the task of pedestrian recognition and demonstrate that generated data resemble properties of the real domain.
updated: Wed Nov 22 2023 15:27:53 GMT+0000 (UTC)
published: Tue Jul 06 2021 15:27:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト