3D オブジェクトを含むタスクの最適化と計画の方法は、多くの場合、事前の知識とアドホックなヒューリスティックに依存しています。この作業では、3D 深層学習の最近の進歩を活用して、学習ベースの長期パス生成をターゲットにしています。フリーフォーム 3D オブジェクトのロボットによるスプレー塗装を学習するための最初のデータセットである PaintNet を紹介します。 PaintNet には、800 を超えるオブジェクト メッシュと、実際の工業環境で収集された関連するペイント ストロークが含まれています。次に、このタスクに取り組み、構造化されていない入力空間 (ポイント クラウド) と構造化された出力空間 (ペイント ストロークの順序付けられていないセット) を操作するための新しい 3D ディープ ラーニング手法を紹介します。私たちの広範な実験的分析は、グラウンド トゥルース ペイント カバレッジに関して、以前は見えなかったオブジェクト サーフェスの最大 95% をカバーするスムーズな出力ストロークを予測する方法の機能を示しています。 PaintNet データセットと提案されたアプローチの実装は、https://gabrieletiboni.github.io/paintnet でリリースされます。
Optimization and planning methods for tasks involving 3D objects often rely on prior knowledge and ad-hoc heuristics. In this work, we target learning-based long-horizon path generation by leveraging recent advances in 3D deep learning. We present PaintNet, the first dataset for learning robotic spray painting of free-form 3D objects. PaintNet includes more than 800 object meshes and the associated painting strokes collected in a real industrial setting. We then introduce a novel 3D deep learning method to tackle this task and operate on unstructured input spaces -- point clouds -- and mix-structured output spaces -- unordered sets of painting strokes. Our extensive experimental analysis demonstrates the capabilities of our method to predict smooth output strokes that cover up to 95% of previously unseen object surfaces, with respect to ground-truth paint coverage. The PaintNet dataset and an implementation of our proposed approach will be released at https://gabrieletiboni.github.io/paintnet.