arXiv reaDer
ロボット アプリケーションのための Sim2Real ドメイン ランダム化を使用したオブジェクト検出
Object Detection Using Sim2Real Domain Randomization for Robotic Applications
構造化されていない環境で動作するロボットは、周囲を感知して解釈できなければなりません。ロボット工学の分野におけるディープ ラーニング ベースのモデルの主な障害の 1 つは、さまざまな産業用途向けのドメイン固有のラベル付きデータがないことです。この論文では、任意のサイズとオブジェクトタイプのラベル付き合成データセットを自動的に生成できる、オブジェクト検出のためのドメインランダム化に基づく sim2real 転移学習法を提案します。続いて、最先端の畳み込みニューラル ネットワーク YOLOv4 をトレーニングして、さまざまな種類の産業用オブジェクトを検出します。提案されたドメインのランダム化方法を使用すると、190 の実画像を含む手動で注釈を付けたデータセットで、ゼロショット転送とワンショット転送の場合にそれぞれ 86.32% と 97.38% の mAP50 スコアを達成し、現実のギャップを満足のいくレベルまで縮小することができました。 GeForce RTX 2080 Ti GPU では、データ生成プロセスは画像ごとに 0.5 秒未満で済み、トレーニングは約 12 時間続くため、産業用途に便利です。当社のソリューションは、トレーニングに 1 つの実画像のみを使用することで、同様のクラスのオブジェクトを確実に区別できるため、産業のニーズに適合します。私たちの知る限り、これはこれまでのところこれらの制約を満たす唯一の作品です。
Robots working in unstructured environments must be capable of sensing and interpreting their surroundings. One of the main obstacles of deep learning based models in the field of robotics is the lack of domain-specific labeled data for different industrial applications. In this paper, we propose a sim2real transfer learning method based on domain randomization for object detection with which labeled synthetic datasets of arbitrary size and object types can be automatically generated. Subsequently, a state-of-the-art convolutional neural network, YOLOv4, is trained to detect the different types of industrial objects. With the proposed domain randomization method, we could shrink the reality gap to a satisfactory level, achieving 86.32% and 97.38% mAP50 scores respectively in the case of zero-shot and one-shot transfers, on our manually annotated dataset containing 190 real images. On a GeForce RTX 2080 Ti GPU, the data generation process takes less than 0.5s per image and the training lasts around 12h which makes it convenient for industrial use. Our solution matches industrial needs as it can reliably differentiate similar classes of objects by using only 1 real image for training. To our best knowledge, this is the only work thus far satisfying these constraints.
updated: Mon Aug 08 2022 14:16:45 GMT+0000 (UTC)
published: Mon Aug 08 2022 14:16:45 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)
Amazon.co.jpアソシエイト