arXiv reaDer
教師なしのSimからRealへの画像変換で現実のギャップを埋める
Closing the Reality Gap with Unsupervised Sim-to-Real Image Translation
ディープラーニングアプローチは、コンピュータービジョンやロボット工学の多くの問題に対する標準的なソリューションになっていますが、人的労力はエラーが発生しやすく、時間と費用がかかるため、十分な品質で十分なトレーニングデータを取得することは困難です。シミュレーションに基づくソリューションは近年人気が高まっていますが、シミュレーションと現実のギャップは依然として大きな問題です。この論文では、オープンソースフレームワークを使用してシミュレートされた画像に実世界の画像のスタイルを適用することにより、監視されていない画像から画像への変換を通じて合成画像データを拡張する新しい方法を紹介します。生成されたデータセットは、従来の拡張方法と組み合わされ、自律型サッカーロボットでリアルタイムに実行されるニューラルネットワークモデルに適用されます。私たちの評価は、完全にシミュレーションで生成された画像でトレーニングされたモデルと比較して、大幅な改善を示しています。
Deep learning approaches have become the standard solution to many problems in computer vision and robotics, but obtaining sufficient training data in high enough quality is challenging, as human labor is error prone, time consuming, and expensive. Solutions based on simulation have become more popular in recent years, but the gap between simulation and reality is still a major issue. In this paper, we introduce a novel method for augmenting synthetic image data through unsupervised image-to-image translation by applying the style of real world images to simulated images with open source frameworks. The generated dataset is combined with conventional augmentation methods and is then applied to a neural network model running in real-time on autonomous soccer robots. Our evaluation shows a significant improvement compared to models trained on images generated entirely in simulation.
updated: Tue Jun 15 2021 10:39:20 GMT+0000 (UTC)
published: Mon Nov 04 2019 23:17:03 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト