arXiv reaDer
LIT: Light-field Inference of Transparency for Refractive Object Localization
 半透明性は日常のシーンで一般的です。そのため、ロボットが操作を行うには、透明な物体の知覚が不可欠です。テクスチャが豊富な、またはテクスチャのないランバートのオブジェクトと比較して、透明度はオブジェクトの外観に大きな不確実性をもたらします。あいまいさは、照明、視点、および背景の変化が原因である可能性があり、それぞれが既存のオブジェクトポーズ推定アルゴリズムに課題をもたらします。この作業では、ライトフィールドセンシングとフォトリアリスティックレンダリングを使用して透明なオブジェクトの姿勢を推定するための2段階の方法であるLITを提案します。 LITは、深層ネットワークのライトフィールド画像に固有の複数のフィルターを使用して、生成サンプリングに基づいた堅牢な深度と姿勢推定器を備えた透明な材料特性をキャプチャします。 LITアルゴリズムとともに、認識、ローカリゼーション、および姿勢推定のタスクのために、ライトフィールド透明オブジェクトデータセットProLITを導入します。このProLITデータセットに関して、LITが最先端のエンドツーエンドポーズ推定方法と透明なオブジェクトの生成ポーズ推定器の両方を上回ることができることを実証します。
Translucency is prevalent in everyday scenes. As such, perception of transparent objects is essential for robots to perform manipulation. Compared with texture-rich or texture-less Lambertian objects, transparency induces significant uncertainty on object appearances. Ambiguity can be due to changes in lighting, viewpoint, and backgrounds, each of which brings challenges to existing object pose estimation algorithms. In this work, we propose LIT, a two-stage method for transparent object pose estimation using light-field sensing and photorealistic rendering. LIT employs multiple filters specific to light-field imagery in deep networks to capture transparent material properties, with robust depth and pose estimators based on generative sampling. Along with the LIT algorithm, we introduce the light-field transparent object dataset ProLIT for the tasks of recognition, localization and pose estimation. With respect to this ProLIT dataset, we demonstrate that LIT can outperform both state-of-the-art end-to-end pose estimation methods and a generative pose estimator on transparent objects.
updated: Mon Mar 23 2020 17:22:39 GMT+0000 (UTC)
published: Wed Oct 02 2019 00:15:00 GMT+0000 (UTC)
参考文献 (このサイトで利用可能なもの) / References (only if available on this site)
被参照文献 (このサイトで利用可能なものを新しい順に) / Citations (only if available on this site, in order of most recent)アソシエイト