イミテーションラーニングは、専門家のデモンストレーションを使用して最適なポリシーを明らかにし、実際のロボット工学タスクにも適しています。ただし、この場合、安全性、経済性、時間の制約から、エージェントのトレーニングはシミュレーション環境で実行されます。その後、エージェントはsim-to-realメソッドを使用して実際のドメインに適用されます。この論文では、シミュレートされた環境でロボット工学のタスクを解決する模倣学習手法を適用し、転移学習を使用してこれらのソリューションを実際の環境に適用します。私たちのタスクは、ロボットエージェントが単一の前向きカメラの入力画像に基づいて右車線をたどる必要があるダッキータウン環境に設定されています。このタスクを達成できる3つの模倣学習と2つのsim-to-realメソッドを紹介します。これらの手法の長所と短所を強調するために、これらの手法の詳細な比較が提供されています。
Imitation Learning uses the demonstrations of an expert to uncover the optimal policy and it is suitable for real-world robotics tasks as well. In this case, however, the training of the agent is carried out in a simulation environment due to safety, economic and time constraints. Later, the agent is applied in the real-life domain using sim-to-real methods. In this paper, we apply Imitation Learning methods that solve a robotics task in a simulated environment and use transfer learning to apply these solutions in the real-world environment. Our task is set in the Duckietown environment, where the robotic agent has to follow the right lane based on the input images of a single forward-facing camera. We present three Imitation Learning and two sim-to-real methods capable of achieving this task. A detailed comparison is provided on these techniques to highlight their advantages and disadvantages.