この作業では、新しいエンドツーエンドのトレーニング可能なCNNベースのアーキテクチャを紹介し、平行平板グリッパーに適した把持検出とセマンティックセグメンテーションのための高品質の結果を提供します。これを利用して、以前に計算された把持検出とセマンティックセグメンテーションを利用し、把持検出の精度をさらに高める新しい改良モジュールを提案します。私たちが提案するネットワークは、2つの人気のある把握データセット、つまりCornellとJacquardで最先端の精度を提供します。追加の貢献として、OCIDデータセットの新しいデータセット拡張機能を提供し、非常に困難なシーンでの把握検出を評価できるようにします。このデータセットを使用して、セマンティックセグメンテーションを追加で使用して、シーン内の特定のオブジェクトを選択するために使用できるオブジェクトクラスに把握候補を割り当てることができることを示します。
In this work, we introduce a novel, end-to-end trainable CNN-based architecture to deliver high quality results for grasp detection suitable for a parallel-plate gripper, and semantic segmentation. Utilizing this, we propose a novel refinement module that takes advantage of previously calculated grasp detection and semantic segmentation and further increases grasp detection accuracy. Our proposed network delivers state-of-the-art accuracy on two popular grasp dataset, namely Cornell and Jacquard. As additional contribution, we provide a novel dataset extension for the OCID dataset, making it possible to evaluate grasp detection in highly challenging scenes. Using this dataset, we show that semantic segmentation can additionally be used to assign grasp candidates to object classes, which can be used to pick specific objects in the scene.