目に見えないオブジェクトを効率的かつ正確にセグメンテーションすることは、ロボット操作にとって非常に重要です。ただし、セグメント化が過剰または過小であるため、依然として課題が残っています。既存の改良方法はセグメンテーションの品質を向上させることはできますが、軽微な境界エラーのみを修正するか、十分な速度が得られません。この研究では、インスタンスの追加と削除、および境界の鮮明化を可能にする新しい改良モデルである INSTance Boundary Explicit Error Estimation and Refinement (INSTA-BEEER) を提案します。モデルは、誤差を推定してから改良するスキームを利用して、最初にピクセルごとの境界の明示的な誤差 (初期セグメンテーションにおけるインスタンス境界の真陽性、真陰性、偽陽性、および偽陰性ピクセル) を推定します。次に、これらの誤差推定値をガイダンスとして使用して、初期セグメンテーションを調整します。実験では、提案されたモデルがセグメンテーションを大幅に強化し、最先端のパフォーマンスを達成することが示されています。さらに、このモデルは実行時間が短い (0.1 秒未満) ため、さまざまな初期セグメンテーション手法全体でパフォーマンスが一貫して向上しており、実際のロボット アプリケーションに非常に適しています。
Efficient and accurate segmentation of unseen objects is crucial for robotic manipulation. However, it remains challenging due to over- or under-segmentation. Although existing refinement methods can enhance the segmentation quality, they fix only minor boundary errors or are not sufficiently fast. In this work, we propose INSTAnce Boundary Explicit Error Estimation and Refinement (INSTA-BEEER), a novel refinement model that allows for adding and deleting instances and sharpening boundaries. Leveraging an error-estimation-then-refinement scheme, the model first estimates the pixel-wise boundary explicit errors: true positive, true negative, false positive, and false negative pixels of the instance boundary in the initial segmentation. It then refines the initial segmentation using these error estimates as guidance. Experiments show that the proposed model significantly enhances segmentation, achieving state-of-the-art performance. Furthermore, with a fast runtime (less than 0.1 s), the model consistently improves performance across various initial segmentation methods, making it highly suitable for practical robotic applications.